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庄 兴 无 ”福建 师范 大 学 教授 , 1962 年 福建 师范 学 院 数学 专业 本 科 毕 业 . 1979 一 1981 
年 赴 罗 马 尼 亚 布加勒斯特 大 学 数学 系 做 访问 学 者 . 1994 年 赴 美 国 密苏里 大 学 数学 
系 做 高 级 访问 学 者 . 从 事 概 率 论 与 数理 统计 研究 , 在 国内 外 杂志 发 表 学 术 论 文 三 十 
多 篇 . 曾 主 持 两 项 国家 上 日 然 科学 基金 项 目 和 多 项 福建 省 科技 研究 项 目 , 获 福建 省 科 
技 进步 二 等 奖 、 福 建 省 高 校 科技 成 果 三 等 奖 、 福建 省 教学 成 果 二 等 奖 . 


陈 宗 淘 “福建 师范 大 学 教授 , 福建 省 统计 局 特约 研究 员 . 1963 年 福建 师范 学 院 数 学 
专业 本 科 毕 业 . 从 事 应 用 概率 统计 研究 , 发 表 学 术 论 文 约 20 篇 , 涉及 多 学 科 、 多 领 
域 . 获 福 建 省 科 枝 进步 二 等 奖 (排名 第 二 )、 三 等 奖 ( 子 课题 负责 人 ). 


陈庆华 ”福建 师范 大 学 副教授 , 1983 年 福建 师范 大 学 数学 专业 本 科 和 毕业 ,1986 年 
福建 师范 大 学 概率 论 与 数理 统计 专业 硕士 研究 毕业 ， 留 校 任教 译 今 , 硕士 生 导 师 . 
2006 年 上 海 大 学 运筹 学 与 控制 论 专业 博士 研究 生 毕 业 ， 获 理学 博士 学 位 ， 从 事 应 
用 概率 统计 研究 , 研究 方 癌 为 随机 锅 与 复杂 网 络 、 可 车 性 数学 ,已 在 《PHYSICAL 
REVIEWE》 等 国内 外 学 术 刊 物 上 发 表 论文 数 篇 . 目前 , 主持 一 项 福建 省 目 然 科学 
基金 项 目 和 一 项 福建 省 科技 计划 项 目 , 参加 一 项 国家 目 然 科 学 基金 项 目 . 
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人 民 邮 电 出 版 社 图 灵 公 司 数学 和 统计 方向 的 策划 编辑 ， 曾 就 引进 国外 优秀 的 
随机 过 程 方 向 教科 书 征询 过 我 的 意见 . 后 来 他 们 决定 翻译 出 版 S. Karlin 和 H. M. 
Taylor 的 4 First Course in Stochastic Processes, 并 邀请 我 担任 此 书 的 译 者 . 我 告诉 
他 们 , 早 在 20 世纪 80 年 代 , 福建 师范 大 学 数学 系 庄 兴 无 教授 等 就 已 经 翻译 过 这 本 
教材 的 绝 大 部 分 . 然后 , 通过 我 的 博士 生 ( 福建 师范 大 学 数学 系 陈 庆 华 博士 ) 促成 了 
此 事 . 在 本 书 中 译本 出 版 前 夕 , 他 们 三 位 译 者 要 我 代 写 一 篇 序言 来 介绍 这 本 教科 书 
的 特色 . 

S. Karlin 是 国际 上 著名 的 应 用 概率 专家 , 斯 坦 福 大 学 数学 系 荣 休 教授 . 生 灭 过 
程 中 计算 平稳 分 布 的 Karlin-McGregor 定理 是 众所周知 的 . 他 的 博士 和 后 M. F. Neuts 
教授 作为 Stochastic Models 杂志 的 葛 基 人 , 通过 引入 PH 分 布 创立 了 矩阵 解析 方法 ， 
在 拟 生 灭 过 程 方面 发 扬 光 大 了 他 的 工作 . 此 外 , Karlin 教授 在 生物 信息 学 方面 也 有 
许多 重要 的 建树 . 我 和 Neuts 教授 有 20 多 年 的 交往 , 在 我 们 2006 年 出 版 的 《生物 
信息 学 一 一 智能 化 算法 及 其 应 用 》 一 书 中 就 引用 了 Karlin 教授 的 一 项 研究 成 果 . 

我 认为 Karlin 和 Taylor 著 的 《随机 过 程 初级 教程 》 是 应 用 随机 过 程 方面 值得 
引进 和 借鉴 的 一 本 优秀 入 门 教材 , 它 的 最 大 特点 是 “理论 与 应 用 紧密 地 结合 在 一 起 ， 
使 两 者 相得益彰 ”, 这 也 是 作者 写作 本 书 的 宗旨 . 

Karlin 和 Taylor 车 的 随机 过 程 分 为 两 卷 : 初级 教程 和 高 级 教程 . 现在 翻译 出 版 
的 是 初级 教程 , 包括 了 马尔 可 夫 链 、 更 新 过 程 、 拷 过 程 、 布 朗 运 动 、 分 支 过 程 和 平 
稳 过 程 等 , 涵盖 了 应 用 随机 过 程 中 最 重要 、 最 常用 的 过 程 类 型 . 离散 时 间 马 尔 可 夫 
链 和 连续 时 间 马 尔 可 夫 链 作为 应 用 随机 过 程 的 基础 内 容 , 作者 用 了 三 章 篇 幅 进 行 论 
述 . 因为 “ 蔷 的 概念 和 方法 对 于 分 析 各 类 随机 过 程 泛 函 是 极为 重要 的 工具 ”, 作者 
在 第 2 版 特意 增加 了 这 一 章 . 又 如 更 新 现象 在 排队 论 、 可 靠 性 理论 和 库存 论 中 非常 
普遍 , 而 布朗 运动 和 分 支 过 程 在 物理 学 、 生 物 学 、 金 融 学 和 社会 科学 中 有 着 广泛 的 
应 用 , 所 以 都 各 有 一 章 讨论 . 此 外 , 有 些 随 机 过 程 教材 很 少 涉及 平稳 过 程 , 但 本 书 专 
门 开 麻 了 一 章 介绍 平稳 过 程 , 使 得 内 容 更 为 完整 . 

由 于 随机 过 程 应 用 的 广泛 性 , 采用 较 多 的 实际 例子 来 说 明 概 念 和 结论 是 十 分 流 
行 的 写作 方法 . 但 是 严谨 的 理论 论述 和 众多 的 实例 解释 交织 在 一 起 , 如 果 处 理 不 好 
就 会 显得 洲 乱 无 章 , 反而 让 读者 一 头 雾 水 . 然而 , 本 书 在 这 个 关键 问题 上 平衡 得 恰 
到 好 处 , 能 将 理论 与 应 用 有 机 地 结合 在 一 起 , 读 起 来 特别 流畅 . 这 样 , 使 学 习 纯 数学 
的 学 生 知道 随机 过 程 的 多 种 应 用 , 增加 学 习 的 兴趣 ; 同时 , 也 使 从 事 应 用 数学 的 学 
生 认 识 到 基础 理论 在 实际 工作 中 的 重要 性 . 

本 书 另 外 一 个 特色 是 每 章 都 附 有 大 量 的 习题 .习题 分 为 初等 的 和 较 难 的 两 部 
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分 , 这 就 使 得 读者 可 根据 目 己 的 水 平 有 所 选择 . 做 习题 不 仅 可 以 加 深 对 所 学 内 容 的 
理解 , 而 且 还 能 够 通过 较 难 的 习题 扩充 相关 理论 . 要 掌握 随机 过 程 的 理论 , 并 准确 
地 应 用 于 解决 实际 问题 , 做 习题 是 个 不 能 忽视 的 手段 . 

总 之 , 这 是 一 本 在 内 容 的 取舍 和 论述 的 方式 上 都 精心 设计 的 随机 过 程 优 秀 入 门 
教材 , 它 将 让 读者 迅速 掌握 随机 过 程 的 精 莫 


史 定 华 
2007 年 2 月 18 日 于 上 海 
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新 版 的 目的 、 层 次 和 风格 与 原版 所 提出 的 宗旨 是 一 致 的 . 我 们 仍 尽力 把 理论 和 
应 用 紧密 结合 在 一 起 , 使 两 者 相 得 益 彩 

新 版 主要 做 了 三 个 方面 的 变动 . 首先 , 我 们 充实 了 第 1 版 中 的 若干 专题 .其 次 
在 每 一 章 未 增加 了 很 多 练习 和 问题 .第 三 方面 , 也 是 最 主要 的 变动 , 我 们 增加 了 新 
的 章节 , 扼要 讨论 了 第 1 版 未 涉及 的 几 种 随机 过 程 , 如 , 鞠 、 与 随机 和 相 联系 的 更 新 
和 波动 现象 、 平 稳 随 机 过 程 以 及 扩散 理论 

扫 的 概念 和 方法 对 于 分 析 多 种 类 型 随机 过 程 汉 函 是 极为 重要 的 工具 . 特别 地 
所 模型 已 有 效 地 用 于 扩散 型 随机 模型 的 研究 , 更 新 现象 在 工程 学 和 管理 科学 中 , 万 
其 在 可 稳 性 、 排队 和 存储 系统 中 几乎 是 同样 重要 的 . 我 们 将 增加 一 章 来 系统 地 讨论 
更 新 理论 , 新 增 的 另 一 章 将 探讨 平稳 过 程 理论 及 其 在 革 些 工程 和 经 济 问题 中 的 应 用 
其 他 的 新 章节 将 研究 可 以 用 来 描述 某 些 生物 和 物理 系统 的 扩散 过 程 理论 , 以 及 在 分 
排队 系统 和 运筹 学 菜 些 方面 上 为 有 用 的 独立 随机 变量 和 的 波动 性 质 

各 章 之 问 逻 辑 上 的 联系 由 右 图 说 明 ，1.1 节 可 浏览 而 过 , 不。 
必 拘 泥 于 细节 . 第 7 章 中 只 有 7.5 节 和 7.6 节 与 第 6 章 有 关 第 | 
9 章 中 只 有 9.9 节 与 第 5 章 有 关 

第 1 章 的 1.2 节 和 1.3 节 (1.1 闻 的 内 容 只 须 粗 赂 地 复习 )、 
第 2 章 、 第 3 音 ( 除 了 3.5 节 和 3.6 节 )、 第 4 章 ( 除 了 4.3 节 、4.7 
节 和 4.8 节 ) 等 部 分 可 以 组 成 适合 于 大 学 三 、 四 年 级 一 个 学 期 课 
各 的 教材 . 至 于 后 面 内 容 的 选取 可 由 讲授 和 项 酌 确定 , 从 第 5 章 / 
至 第 9 章 的 前 面 几 节选 取 一 些 材料 比较 适宜 

章 末 的 问题 分 成 两 组 , 第 一 组 比较 初等, 第 二 组 比较 困难 和 
精细 

本 书 涉及 范围 十 分 广泛 ， 因 此 分 为 “初级 教程 * 和 “高 级 孝 
程 * 两 卷 初级 教程 包括 作为 理论 基础 并 与 应 用 关系 最 密切 的 几 
种 主要 随机 过 程 . 在 高 级 教程 中 我 们 将 介绍 另外 一 些 论题 和 应 用 , 并 更 深入 研究 和 
级 教程 中 提出 的 一 些 问题 .我 们 选材 考虑 到 要 适应 更 广泛 的 读者 , 包括 从 事 有 关 数 
学 的 、 工 程 的 、 物 理学 的 、 生 物 学 的 、 社 会 科学 以 及 管理 科学 中 随机 分 析 的 理论 研 
究 者 和 实际 工作 者 

作为 本 书 下 卷 的 《随机 过 程 高级 教程 将 包括 如 下 几 音 : 第 10 章 , 马尔 可 夫 链 
的 代数 方法 ; 第 11 章 , 转移 概率 的 比 定理 及 应 用 ; 第 12 章 , 作为 马尔 可 夫 链 的 独立 
随机 变量 和 ; 第 13 章 , 顺序 统计 量 、 泊 松 过 程 和 应 用 ; 第 14 章 , 连续 时 间 马 尔 可 夫 
链 第 15 章 , 扩散 过 程 ;第 16 章 , 复合 随机 过 程 ; 第 17 章 , 独立 同 分 布 随机 变量 部 
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分 和 的 波动 理论 ; 第 18 章 , 排队 过 程 

如 第 1 版 序言 所 说 , 我 们 引用 了 随机 过 程 理 论 和 应 用 方面 的 大 量 文献 . 每 章 的 
末 昆 附 有 某 些 有 代表 性 的 参考 书目 , 这 对 进一步 查阅 资料 是 有 益 的 . 

我 们 感谢 魏 效 曼 科 学 所 、 斯 坦 福 大 学 和 康泰 尔 大 学 提供 了 一 个 资料 丰富 和 工 
作 方 便 的 环境 . 第 一 作者 感谢 海军 研究 所 持续 给 予 的 大 力 支 持 , 使 得 我 们 能 集中 精 
力 考 虑 本 书 的 若干 思想 和 写作 计划 . 我 们 衷心 感谢 同事 们 提出 许多 建设 性 的 意见 ， 
尤其 是 La Trobe 大 学 的 P.Brockwell 教授 、 牛 津 大 学 的 J Kingman 教授 、 斯 坦 福 
大 学 的 D. Iglehart 和 S.Ghurye 教授 以 及 康 奈 尔 大 学 的 伊 葛 清 教授 和 S. Stidham， 
Jr. 教授 . 我 们 也 感谢 我 们 的 学 生 M. Nedzela 和 C. Macken 协助 检查 习题 并 校对 文 
字 . 


Samuel Karlin 
Howard M. Taylor 


第 1 版 序言 


随机 过 程 主要 考虑 服从 概率 规律 的 事件 序列 . 它 广泛 应 用 于 物理 学 、 工 程 学 、 
生物 学 、 医 党、 心理 学 和 其 他 学 科 , 以 及 数学 的 其 他 分 支 . 本 书 的 目的 是 为 随机 过 
程 的 许多 专题 提供 一 个 导 引 . 特别 地 , 我 力图 做 到 以 下 三 点 : (1) 提出 随机 过 程 几 个 
主要 领域 的 系统 性 导 引 ; (2) 使 纯 数 学 专业 的 学 生 对 随机 过 程 的 多 种 应 用 产生 兴趣 ; 
(3) 使 偏重 于 应 用 的 学 生 认 识 到 随机 过 程 的 基础 数学 理论 的 重要 性 . 

本 书 的 例子 主要 来 源 于 生物 学 和 工程 学 , 但 着 重 于 具有 数学 趣味 的 或 者 在 若干 
学 科 中 都 有 重要 意义 的 随机 模型 . 我 们 要 讨论 和 阐述 概率 论 中 的 许多 著名 的 概念 和 
问题 . 

由 于 在 一 本 初级 教程 中 不 可 能 讨论 这 个 领域 的 所 有 方面 , 故我 们 省 略 了 一 些 重 
要 的 专题 , 例如 , 平稳 随机 过 程 和 拷 ， 本 书 在 任何 意义 下 都 不 希望 成 为 一 本 权威 性 
著作 , 相反 , 本 书 的 目的 只 是 希望 在 初等 概率 论 和 许多 优秀 的 高 级 随机 过 程 论著 之 
四 搭建 一 座 桥 梁 . 

我 们 假定 读者 如 悉 初 等 概率 论 , 例如 Feller 的 《概率 论 及 其 应 用 》 前 半 部 分 ，. 
1.1 节 介 绍 了 必要 的 背景 材料 以 及 本 书 的 术语 和 记号 . 部 分 内 容 初 读 时 可 略 过 .每 
章 末 附 有 练习 以 帮助 解释 和 扩充 理论 部 分 . z 

根据 实际 需要 本 书 可 作为 一 个 学 期 或 两 个 学 期 的 课程 来 安排 . 

在 写 这 本 书 时 , 我 们 参考 了 大 量 随 机 过 程 的 文献 . 每 章 末 痢 附 有 相关 的 参考 书 
日, 以 便于 进一步 查阅 材料 和 文献 . 

我 感谢 斯 坦 福 大 学 和 美国 海军 科研 局 为 写 此 书 提供 的 各 种 方便 和 经 费 支持 . 感 
谢 我 的 同事 , 如 斯 坦 福 大 学 的 钟 开 莱 教 授 和 J. McGregor 教授 , 他 们 经 常 给 予 我 鼓励 
和 帮助, 感谢 达 特 戈 斯 学 院 的 J.Lamperti 教授 、 康 奈 尔 大 学 的 J.Kiefer 教授 和 威 斯 
康 星 大 学 的 P.Ney 教授 提出 许多 建设 性 意见 , 感谢 A.Feinstein 博士 详细 阅读 了 手稿 
的 主要 部 分 , 感谢 我 的 学 生 P.Milch、B.Singer、M.Feldman 和 B.Krishnamoorthi 提出 
有 益 的 意见 并 协助 组 织 习 题 . 最 后 , 我 要 感谢 Gail Lemmond 和 Rosemarie Stampfel. 


Samuel Karlin 


1. 该 书 第 1 卷 中 文 版 已 由 人 民 邮 电 出 版 社 出 版 , 第 2 卷 中 文 版 也 将 于 2007 年 由 人 民 邮 电 出 版 社 出 版 . 
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第 1 章 ”随机 过 程 初步 


1.1 节 概 述 了 必要 的 背景 材料 并 介绍 了 本 书 使 用 的 术语 和 记号 . 建议 读者 先 济 
览 而 过 , 不 必 深 究 , 待 以 后 需要 时 再 回头 复习 . 

1.2 介绍 了 着 名 的 布朗 运动 和 泊 松 过 程 , 1.3 节 概 括 介 绍 了 本 书后 面 主要 涉及 
的 各 类 随机 过 程 . 

为 了 完整 起 见 , 最 后 一 节 讨 论 了 一 般 理 论 中 的 一 些 技术 问题 . 这 一 节 在 初 读 时 
可 以 略 过 . 


1.1 基本 术语 、 随 机 变量 和 分 布 函 数 性 质 的 复习 


本 简要 复习 概率 论 中 基本 概念 和 术语 . 本 节 内 容 在 以 后 各 章 中 将 时 常 使 用 而 
不 再 详细 说 明 . 我 们 建议 读者 考虑 本 章 末 的 问题 , 这 些 问 题 不 仅 可 供 练习 而 且 有 助 
于 阐明 概念 . 者 要 详细 讨论 这 些 问 题 , 读者 可 参考 任何 一 本 标准 的 概率 论 教 程 . ( 见 
本 章 末 参 考 书目 .) 

我 们 假定 读者 熟悉 以 下 概念 . 

(1) 实 随 机 变量 X. 

(2) XX 的 分 布 函 数 下 (定义 为 F( 和 ) = Pr{X < 和 }) 和 它 的 初等 性 质 . 

(3) 有 关 随 机 变量 X 的 事件 及 其 概率 . 

(和 和 的 期 望 E{X] 及 高 阶 矩 E{X"}. 

(5) 用 于 计算 事件 概率 的 全 概率 公式 和 贝 叶 斯 公式 . 

缩写 词 rv， 表示 “ 实 随机 变量 ”，r.v， XX 称 为 离散 型 的 , 如 果 存 在 有 限 或 可 
列 个 不 同 的 值 和 ,和 2,… 使 得 wu 三 Pr{X = 入 } >0,i=1,2,…, 并 且 》ai=1. 


车 对 每 个 实数 和 ,Pr{X = 和 } = 0, 则 称 rv，X 为 连续 型 的 . 如 果 存在 非 负 函数 
p(t), 一 00 <t < 二 00, 使 得 r.v. 污 的 分 布 函数 由 下 式 确 定 : 


入 
F(X) = / p(t)dt, 


则 称 p 为 X 的 概率 密度 . 如 果 X 具有 概率 密度 , 它 必 定 是 连续 型 的 . 然而 有 例子 表 
明 , 连续 型 的 r.v. 不 一 定 具有 概率 密度 . 
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如 果 X 是 离散 型 r.v., 那么 它 的 m 阶 和 矩 由 下 式 确 定 : 


E[X”"] = 》 MPr{X = 和}, 


(这 里 的 Ai 如 前 所 述 ) 假定 此 处 的 级 数 绝 对 收敛 ， 
如 果 XX 是 具有 概率 密度 p(-) 的 连续 型 随机 变量 , 它 的 m 阶 矩 由 下 式 确 是: 


px"= ~ omp(z)dz, 


假定 上 述 积 分 绝对 收敛 . 

X 的 一 阶 矩 通常 称 为 均值 或 期 望 ;, 用 mx 或 jx 表示 . 如 果 mx 存在 , X 的 mm 
阶 中 心 矩 定义 为 r.v. 外 一 mx 的 mm 阶 矩 .一 阶 中 心 窍 显然 是 零 , 二 阶 中 心 窍 称 为 头 
的 方丈, 记 为 o. 具有 性 质 Pr{X > 中 > 5 和 Pr{X < v)} > 5 的 值 v 称 为 rv X 
的 中 位 数 

如 采 XX 是 随机 变量 , 9 是 函数 , 那么 Y = 9(X) 也 是 随机 变量 . 如 果 XX 是 离散 
型 随机 变量 , 具有 值 zi x2,…, 那么 9(X) 的 期 望 由 下 式 给 定 : 


Elg(X)] = 》 g(zi)Pr{X = zi}, (1.1) 
i=] 


这 里 , 假定 级 数 绝对 收敛 . 奉 X 是 连续 型 的 且 具 有 概率 密度 函数 px, 则 9(X) 的 期 
刻 由 下 式 计 算 : 


Elg(X)] = / g(z)px (z)dz. (1.2) 
包括 上 述 离散 和 连续 两 种 情形 的 一 般 公 式 是 
Blo(X)] = | oodPx(o) (133) 


这 里 Fx 是 r.v. 扎 的 分 布 函数 , 积分 (1.3) 称 为 Lebesgue-Stieltjes 积分 . 在 这 本 书 
中 我 们 暂 不 需要 这 种 积分 的 知识 . 但 当 X 是 离散 型 随机 变量 时 , (1.3) 即 表示 (1.1)， 
当 针 具有 概率 密度 孙 数 px 时 , (1.3) 即 表示 (1.2). 
设 Fy(y) = Pr{Y < 让 表示 Y = g(X) 的 分 布 函数 , 当 X 是 离散 型 随机 变量 
时 ， 
ElY| = >》 siPrfY 一 i} = > g(xi)Pr{X = XTi}, 
此 处 yi = g(xi), 并 且 假 定 第 二 个 和 是 绝对 收敛 的 . 一 般 地 有 


BlY]= | varv(y) = | gwarx(s) (1.4) 
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如 果 X 是 离散 型 的 随机 变量 , 则 Y = g(X) 也 是 离散 型 r.v.; 然而 , 当 X 是 连续 型 
随机 变量 时 Y 却 可 能 是 离散 型 的 (读者 可 日 人 即使 如 此 , 由 (1.4) 两 种 
方式 计算 ElY] 结果 都 是 相同 的 . 


A. 联合 分 布 隧 数 
给 定 一 对 r.v.(X, 了 ), 它们 的 联合 分 布 函数 是 由 下 式 确 定 的 二 元 实 变量 的 函数 


F(AMi, NM) = 二 Fxy (M1, \2) < Pr{X < A1,Y < 入 2 上， 


( 倘 在 不 会 引起 混淆 , 通常 省 略 下 标 XY) . 

函数 (和 ,+o0) = ,lim_ P(A1, Xz) 是 一 个 概率 分 布 函数 , 称 为 X 的 边缘 分 布 区 
数 . 类 似 地 , 函数 下 (十 oo, 入) 称 为 站 的 边缘 分 布 函数 . 如 果 对 于 任意 的 Ni, Xa 成 立 
F(Ai1,+00) .下 (+oo 和 oa) 二 ON, 和 2), 则 称 随 机 变量 X 和 Y 是 相互 独立 的 或 独立 
的 . 称 联合 分 布 函数 Fxy 具有 (联合 ) 概率 密度 , 如 果 存 在 二 元 实 变量 的 非 负 函数 
pxY(s,t) 使 得 


MI 
PxrOu%)= | | DXY(s, tdsdt 


对 任意 和 1, 和 2 成 立 . 如 果 X 和 了 是 独立 的 , 则 pxy(s,t) 必 有 形式 px(s)py (4), 其 中 
px 和 py 分 别 是 X 和 YY 的 边缘 分 布 概率 密度 . 
n 个 Tv. X1X2…,Xn 的 联合 分 布 若 数 和 定义 为 : 


F(A, M2,: “, An) 一 Fx, Xa,...,X, (A1, A2， ;An) 
= Pr{Xi 和 Al, 2 < 和 2 … ,人 nm 和 An}. 


分 布 函数 


av OA 信人 ) 
称 为 随机 变量 Xi ,Xi;,,… ,Xi 的 边缘 分 布 . 
如 果 对 所 有 值 入 ,… ,和 An, 了 OL … ,An) = Fx (和 1)… 了 Fx, (A 和 n), 则 称 rn 个 随机 
变量 XX ,X2,… ,Xn 是 相互 独立 的 或 独立 的 . 
联合 分 布 函 数 下 ( 和 i, 和 2，,…, Ax) 称 为 具有 概率 密度 , 如 果 存 在 n 个 实 变量 的 非 
仙 阔 数 p(t1,… ,tn) 使 得 


有 AI = 及 广 pP(t ,tn)dti:: 


对 所 有 实 值 入 1 ， ) 和 An 成 立 . 
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如 果 关 和 YY 分别 具 有 均值 mx 和 my, 它们 的 协 方差 (oxy) 定义 为 乘积 邱 
TxY 一 El(X 一 mx)(Y 一 my )|. 


如 果 Xi 和 XX 是 分 别 具 有 分 布 函数 下 和 E 的 独立 随机 变量 , 则 和 关 = 
Xi 十 Xo 的 分 布 函数 下 是 下 和 刺 的 车 积 


Flz) = / F(z —Y)dF2(y) = / F(z ~ WdFi(y). 


特别 当 Xi 和 XX。 具有 概率 密度 pl 和 pa 时 , 和 X 和 = Xi +Xo2 的 密度 函数 p 是 密度 
pl 和 po 的 卷 积 


plz) = | pi(z ~ Y)p2(y)dy = / pa(x — Y)p1 (Ydy. 


B. 条 件 分 布 和 条 件 期 望 
已 知事 件 B 的 条 件 下 事件 4 的 条 件 概率 Pr{4|B} 定义 如 下 : 
Pr{AB} 
Pr{B} 
当 Pr{B} =0 时 没有 定义 或 指定 一 个 任意 值 . 设 X 和 了 是 仅 取 可 列 多 个 不 同 值 的 
随机 变量 , 例如 1,2,…, 已 知 Y =y 时 关 的 条 件 分 布防 数 Fxjy(-|y) 定义 为 
Pr{X <7z,Y =y} 
Pr{Y =y} 
当 Pr{Y = Yj} = 0 时 , 规定 为 任意 离散 型 分 布 函 数 . 后 面 这 个 规定 与 以 后 引用 条 件 
分 布 消 数 的 计算 相 一 致 
者 和 和 了 具有 联合 概率 密度 函数 Pxy(z,y), 则 已 知 Y =y 时 XX 的 条 件 分 布 
为 


Pr{AIB} = 夺 Pr{B} > 0; 


FxlY (Z|y) = 大 Pr{Y =y}>0; 


/ pxY (é,y)dé 


sz 
DY( 切 
这 里 py(y) > 0; 当 py(y) = 0 时 , 可 指定 为 任意 值 . 
注意 , Fxjy 满足 
(C.P.1) 对 每 个 固定 的 y, Fxly (zjy) 是 z 的 分 布 函数 ; 
(C.P.2) 对 每 个 固定 的 rz, Fxjy (zly) 是 y 的 函数 ; 
(C.P.3) 对 任意 x,y， 


Fxly (7z|y) = 


3 


Pr{X<zY<j= | Fxiv (zdFy (n), 
PY 


A 


0 


a Fp po eo fr unl 
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其 中 , 本 (=PrtY 和 吵 是 Y 的 边缘 分 布 . 如 前 面 说 明 的 那样 , 在 本 书 中 读者 只 须 
对 离散 型 和 连续 型 随机 变量 处 理 (C.P.3) 中 的 积分 . 即 当 Y 有 概率 密度 函数 py (y) 
时 ,(C.P.3) 变 为 


PrtX 么 2 了 乏 寺 = 1 Fxly (zn)pY (dn; 
JE 


而 当 Y 是 离散 型 r.v. 时 , (C.P.3) 变 为 


Pr{XS<zY 和 内 = Fxly(zImPr{Y = 只 


nS&Y 
上 述 三 个 性 质 是 条 件 分 布 的 本 质 特 征 . 事实 上 , 由 (C.P.3) 我 们 得 到 
Pr{X «<rY=y}=Pr{X <r,Y <y}—Pr{X<zr,Y < yy) 
= > Fxly (zImPr{Y = 7} — > Fxly (TImPr{Y = 7} 


= Fxly (XIy)Pr{Y = y}, 
当 Pr{Y = 扮 > 0 时 上 式 弘 池 着 条 件 分 布 的 定义 Pxiv zl = 下 
在 较 高 级 的 著作 中 , (C.P.1~3) 被 作为 条 件 分 布 定义 的 基础 . 由 此 可 以 规定 任意 
两 个 随机 变量 X 和 Y 的 条 件 分 布 , 进而 规定 任意 两 个 随机 向 量 X = (X1,…，X) 
和 了 = (Yi,…,Y4) 的 条 件 分 布 : 
当 y= oo 时 , 应 用 (C.P.3) 即 导出 全 概率 公式 


十 co 
PrX< 可 =PrXsznyscj= 人 Fxv(slyaryly), 
一 oo 


这 是 概率 论 中 最 基本 的 公式 之 一 . 当 了 是 离散 型 时 , 上 式 变 为 
Pr{X <7z}= > Pr{X < zlY = 分 PrY= 分， 


了 


当 了 有 概率 密度 函数 pr(y) 时 , 我 们 有 
十 ooc 
Pr{X < 7X}= / Pr{X < zlY = y}py (ydy. 


当 针 和 YY 具有 联合 概率 密度 函数 pxy (7z,y) 时 , 我 们 可 以 定义 已 知 Y =y 时 
X 的 条 件 密度 函数 为 


DXY (X,Y) 
py (y) 


1. 进一步 地 痔 述 , 包括 关于 条 件 期 望 严格 和 直观 的 讨论 , 可 参阅 6.7 节 . 这 些 概念 对 发 展现 代 堵 理论 起 
着 重要 作用 ， 


9 


d 
pxiy (zly) = jExIY (zly) 一 


L6 | 
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这 里 假定 py(y) > 0; 当 py(y)=0 时 可 指定 为 任意 概率 密度 函数 
设 9 是 一 实 晒 数 , 且 g(X) 的 期 望 是 有 限 的 . 已 知 Y = y 时 9( 瑟 ) 的 条 件 期 望 
可 表达 为 


Elg(X)Y = = / g(z)dFxy (zly). 
当 X,Y 具有 联合 概率 密度 函数 时 , Blg(X)|Y = 可 通过 下 式 计算 
Elg(X)Y = = / g(z)pxiy (zly)dz 


/ g(T)pxYy (7z, yj)dz 
py (y) 
夺 XX 和 YY 是 离散 型 随机 变量 , X 可 能 取 值 z1,z2,…, 则 上 式 归结 为 


， 帮 py(y)>0; (1.5) 


Elg(X)lY =Y] = >》_g(zi)Pr{X = zilY = 


ti 二 1 


2, g(xi)Pr{X = zi,Y = 从 
= et 大 Pr{Y =y}>0. 
与 (C.P.1~3) 类 似 , 易 知 在 给 定 Y = y 时 g(X) 的 条 件 期 望 满足 
(C.E.1) 对 于 每 个 函数 g, 铬 Ellgo(X) 川 < +oo, 则 Elg(X)|Y = yl 是 gy 的 函数 ; 
(C.E.2) 对 于 任意 有 界 函 数 h, 我 们 有 


Elg(X)h(Y)| = / Elg(X)|Y = ylh(y)dFy (y), 


其 中 Fy 是 Y 的 边缘 分 布 函数 , 

下 面 我 们 证 实在 连续 型 情况 下 公式 (C.E.2) 成 立 . 

假设 使 py(y) > 0 的 y 值 的 集合 是 一 个 区 间 (a,b), 一 o0 < a < < +oo. 利用 
Fy(y) 具有 概率 密度 函数 , 并 用 式 (1.5) 代入 , 得 


b 
/ Elg(X)|lY = yjh(y)dFy(y) = / Elg(X)|Y = yh(y)pr (ydy 


= / ( / ~ g(a)pxiy (aly)ds ) h(y)py ty)dy 


一 OO 


= / ( / 和 or) eas ) h(y)py (y)dy 


b 十 ec 
- / / g(z)h(y)pxy (z, Ydzdy 
= Elo(X)h(Y)]. 
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最 后 一 个 等 号 用 到 假定 : 仅 当 a <y < 时 pxr(z,y) > 0. 
在 (C.E.2) 中 , 若 h(y) 三 1 即 导 出 对 于 期 望 的 全 概率 公式 


Blg(X) = /BeCOIY = Yary ly) 
当 Y 高 散 型 时 上 式 变 为 


Elg(X)] = 》 Elg(X)|Y = y]Pr{Y = yi}, 


4 一 于 


当 具有 概率 密度 函数 py 时 变 为 
Elg(X)] = | Elg(X)Y = ylpr (y)dy. 


由 于 已 知 Y =y 时 g(X) 的 条 件 期 望 是 关于 条 件 分 布 FExiy 的 期 望 , 因此 条 件 
期 望 的 性 质 类 似 于 期 望 . 特别 , 者 ai 和 aa 是 固定 常数 , 9gk 和 gz 为 已 知 函 数 且 满足 
Ellgi(X)| < co = 12, 则 


Elaigi(X)+a2g2(X)Y =Yy 
= QaiElg(X)Y = y+ a2Elge(X)Y = Yl. 


由 (C.E.1) 知 , Blgo(X)IY = y] 是 实 变 量 y 的 函数 , 若 将 这 个 函数 视 为 随机 变量 
Y 的 函数 , 我 们 便 得 到 一 个 随机 变量 , 记 为 lg(X)IY]. 基本 性 质 (C.E.2) 可 改 述 为 ， 
对 任何 y 的 有 界 函 数 刀 有 


Elg(X)h(Y)) = E{Elg(X)Y}h(Y)}. 
当 h(y) = 1 时 , 我 们 得 到 如 下 形式 的 全 概率 公式 
Elg(X)| = E{Elg(X)|Y)}. 


作为 小 结 , 下 面 我 们 列 出 条 件 期 望 的 上 述 性 质 和 其 他 性 质 . 这 里 带 下 标 和 不 带 
下 标的 和 了 均 表 示 随 机 变 量 , c 是 实数 , 9 是 满足 Bllg(X) 川 < oo 的 实 了 泪 数 , f 是 
有 乔 函 数 ,六 是 满足 E[|h(X,Y 了 < oo 的 二 元 实 变量 函数 . 


Elaig(X1) 十 aag(X2j|Y| 
= a1Elg( XIY| + a2Elog(X2)|Y], (1.6) 


9 >0 意味 车 Elg(X)IY] > 0， (1.7) 
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Elh(X,Y)Y =Yy = Elh(X, WY = 外 (1.8) 
奉天 和 YY 独 六 , 则 Elg(X)lY] = Elg(X)] (1.9) 
Elg(X)f(Y)Y] = f(Y)Elg(X)|Y)], (1.10) 
Elo(X)f(Y)| = E{Elg(X)IY]f(Y)}, (1.11) 

作为 (1.6), (1.10) 和 (1.11) 的 推论 , 令 g 三 1 或 f= 1, 我 们 得 到 
ElclY| = c (1.12) 
Elf(Y)IY| = f(Y), (1.13) 

且 

Elg(X)| = E{Elg(X)|Y)}. (1.14) 


C. 随机 变量 的 无 限 族 


在 处 理 随 机 变量 的 无 限 族 问 题 时 ,直接 推广 前 面 的 定义 遇 到 了 实质 性 的 困难 . 
我 们 必须 稍微 修改 一 下 前 面 的 方法 . 

给 定 可 列 随 机 变量 族 X1, 2,…, 它们 的 统计 性 质 确定 如 下 , 对 每 个 整数 之 1 和 
任意 的 ”个 不 同 的 正 整 数 谎 ,i2,… ,in, 随机 变量 Xi, ,XX;,，,… ,Xi,, 的 联合 分 布 函数 为 
Fx ,Xi ,…,Xi。 当 然 , 对 分 布 函 数 汉 Fx ,x;,…,X;。 应 当 附加 某 一 相 容 性 条 件 , 即 


FA 


= lim Fx ,i (Ali， “ Aj-1, Aj, Aj+1) 0 和 An )， 
Ai -CO 


以 及 , 任意 调换 分 布 函数 Fx,, ,x,,、…,x;,。 中 的 两 个 下 标 记 和 ij, 及 其 对 应 的 变量 和 ,和 

和 ,所 得 到 的 分 布 函 数 不 变 . 这 意味 着 随机 变量 列 Xi1, 针 2,… 与 所 附 下 标 方式 无 关 . 
联合 分 布 函 数 族 {Fx,, ,x;,、…,X;, 上} 称 为 {Xn}21 的 有 限 维 分 布 函数 族 , 原则 上 

说 , 有 关 随 机 变量 族 {Xnj}%-l 的 所 有 重要 概率 均 可 由 有 限 维 分 布 函数 族 来 计算 . 


D. 特征 函数 


与 r.v. X 的 分 布 函数 相 联系 的 重要 函数 是 它 的 特征 函数 $(t)( 简 记 为 cf.), 这 
里 上 是 实 变量 -co < 上 < +oo. 我 们 把 它 写 成 如 下 形式 


$b(t) = / etdF(A), i= VvV-l (1.15) 
= Ele™]. 
读者 不 妨 先 形式 上 理解 (1.15). 如 果 F 有 概率 密度 函数 p, 特征 函数 为 
oD) = 人 sepa 


一 上 
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厂 FF 是 离散 型 随机 变量 X 的 分 布 , XX 可 能 取 值 为 {Xx}2&o, 且 Pr{X = 和 x} = 
ax(k = 0,1,.. ), 则 陈 (1.15) 化 为 级 数 


$lt) = > ei Max. 
k=0 


特征 函数 的 重要 意义 大 体 可 以 从 下 述 三 个 方面 看 出 : 

(a) 分 布 函数 和 特征 函数 之 间 的 关系 是 一 一 对 应 的 . 这 样 , 知道 了 特征 函数 等 于 
知道 了 分 布 函数 . 用 特征 函数 表达 分 布 函 数 的 方程 式 就 是 著名 的 勒 维 (Levy) 变换 
公式 . 由 于 我 们 不 用 它 , 对 这 个 问题 的 讨论 请 读者 阅读 有 关 参 考 书 . 

(b) 如 采 XX ，,… ,Xn 是 个 相互 独立 的 随机 变量 , 它们 和 的 特征 函数 便 是 它们 
的 特征 郴 数 的 乘积 ， 这 个 简单 的 结果 使 特征 函数 在 处 理 有 关 独 立 随 机 变量 和 问题 
时 非常 方便 . 


(9 若 随机 变量 的 矩 有 限时 , 它们 可 由 特征 函数 的 微 商 得 到 , 其 关系 式 是 
BIX*] = E09(0) 


其 中 , i= VI, 4 由 (t) = dkg(b/dtk 是 cf 9(t) 的 第 大 阶 导数 

在 各 种 极限 过 程 中 ,分 布 函 数 和 它们 的 特征 函数 之 间 仍 然 保 持 这 种 一 对 一 关系 
事实 上 , 如 果 已 瑟 , 肪 ,是 分 布 函数 , 且 对 下 的 每 个 连续 点 和 ,lim F(X) = F(A)， 
nlt) 是 五, 的 特征 函数 , 则 在 每 个 有 限 区 间 上 一 致 成 立 


内 (四 = / et*dF, (A) — $(t) = 人 et dF (NM):; 
有 反之 , 如 条 如, $2,… 是 分 布 函数 五 , 瑟 ,，… 的 特征 函数 , 且 对 每 个 t 有 lim pn(t) = 
9(t), 9(t) 在 t=0 是 连续 的 , 则 p(t) 是 分 布 函 数 下 的 特征 函数 , 并 且 lim F(X) = 
F( 和 ) 对 FF 的 每 一 连续 点 成 立 . 这 个 结果 是 著名 的 Levy 收敛 准则 . 
E. 母 呢 数 和 拉 普 拉 斯 变换 
对 于 仅 取 非 负 整数 值 的 随机 变量 , 与 特征 函数 相应 的 一 个 函数 是 母 函 数 , 其 定 
义 为 ~ 
g(s) = 》 prs* = Els*], 
天 一 0 
其 中 
pk 二 Pr{X 一 k}. 
由 假设 pk > 0 且 》 px =19(s) 至 少 对 于 |s| < 1(s 是 复 变量 ) 是 有 定义 的 , 且 对 于 


大 一 0 
sl < 1 是 无 限 次 可 微 的 . 非 负 整 数值 随机 变量 的 母 函 数 可 经 过 变量 替换 s = eit 变 
成 X 的 特征 函数 9: 
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$0) = Ele” |]= El(e')”] = g(e"). 
这 样 , 母 函数 保持 了 特征 函数 的 三 个 基本 性 质 : 
(a) 母 函 数 唯 一 确定 其 分 布 函数 ; 
(b) 独立 非 负 整数 值 随机 变量 和 的 母 函数 是 它们 母 油 数 的 乘积 ，; 
(c) 各 阶 窍 可 通过 逐次 微分 得 到 , 阶乘 矩 可 由 下 式 得 到 


EI[X(X—1):...(X—k)] = gg"*+)(1), 
这 里 g(s) = dtg(s)/ds* 是 9 的 第 k 阶 导数 , 因此 
E[X] = g(¥(1), 


- E[X’] = g°2)(1) + gt 0)(1). 

下 面 我 们 举例 说 明 如 何 使 用 母 旺 数 来 处 理 独 立 随机 变量 和 的 问题 ， 设 NN, Xj， 
X2, .… 是 独立 非 负 整数 值 随机 变量 . 现 要 确定 和 R= Xi 十 X2 十 … 十 XN 的 母 隧 
数 gga(s). 这 是 一 个 具有 随机 项 数 的 随机 变量 和 . 

令 gn(s) 是 NN 的 母 活 数 , 并 假定 Xi 同 分 布 , 具有 相同 的 母 孙 数 g9(s)， 利 用 
(1.14) 和 (1.9)， 


gr(s) 一 五 [8 ] 
一 Els~*:1t+XnN] 


= E{Els |N]] 


OO 
= 》 Els*:t"+X"|N = n]Pr{N = n} 


气 
tp - 同 
气 

(因为 N 和 Xi; 是 独立 的 ) 
= yon(sjPrtN = 可 
-ar 
= gnlg(s)). 

综 上 ， 


gr(s) = gn[g(s). 
利用 复合 函数 微分 链 式 法 则 , 有 
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gr(s) = gn[g(s)] .9 (s), 


令 s = 二 1, 我 们 推 外 
和 EIR| = EIN] . EIX]. 


用 类 似 方 式 计 算 R 的 方差 o2, 我 们 得 到 
02 = 五 [X] ?cy + E[N]ox, 
这 里 cx 和 o% 分 别 是 NN 和 天 的 方差 ( 见 初等 问题 4). 
把 上 面 结果 进一步 推广 . 设 Xi1, 义 2,… 是 任意 独立 同 分 布 随机 变量 ( 即 未 必 取 
整数 值 ) 而 N 仍旧 如 上 述 . 则 
brR(t) = gn (9(t)), 


这 里 $k 和 gn 分 别 是 R= Xi 十 … 十 XN 入 的 特征 函数 及 母 蚂 数 , 而 $ 是 XX 
共同 的 特征 肾 数 . 

在 考虑 非 负 随 机 变量 时 , 利用 分 布 函数 的 拉 普 拉 斯 变换 代 震 特征 函数 显得 更 目 
然 些 . 如 果 分 布 函数 Fx 有 密度 函数 px, 拉 普 拉 斯 变换 定义 为 


Wx (s) = / erszpx(zjdz 


这 个 积分 对 于 复 变 量 s 是 存在 的 , 其 中 s = o 十 让 ,oc 和 上 是 实 的 , o > 0. 当 s 是 纯 
虚数 时 , 即 s = ,wx(s) 就 是 特征 函数 gx( 一 t). 对 于 离散 型 非 负 随机 变量 , 拉 普 拉 
斯 变换 定义 为 _ 

wx(s) = 》 e "Pr{X = 和 An 上 


n= 二 0 


pxi+.+xa(s) = [| wx (s). 


天 一 工 


对 于 一 般 的 分 布 函数 , 其 拉 普 拉 斯 变换 定义 为 
Wx(s) = / e “dFx(é). 


与 特征 函数 类 似 , 拉 普 拉 斯 变换 唯一 地 确定 了 分 布 函数 . 
F. 分 布 函 数 的 例子 
若 于 常用 分 布 函数 的 某 些 基本 性 质 见 表 1 和 表 2. 


re 
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表 2 ” 某 些 常见 的 离散 型 概率 分 布 


”高 散 型 分 布 。 ” ”概率 分 布 列 ”参数 的 可 能 取 值 。 ” 母 函 数 均值 方 卷 

泊 松 分 布 2 入 >0 e 一 ^ 人 十 和 3 A A 

/ N = 1,2,.… 
二 项 分 布 (pa -n,n = 0 N O<p<l1 (1~p+ps) Np Npg 

q 二 1 一 p 
负 一 项 a 十 了 一 1 oan aoa>0 p \” aqg ag 
( 巴 斯 卡 ) 分 布 n )p*a™, n=0,1,2,.. 0O<p<1 (i) pp PP 
几何 分 布 p(1 ~—p)™, n= 0,1,2,... 0<p<1 1 3 5 

下 面 给 出 两 个 重要 的 多 元 分 布 沙 数 ; 


(a) 多 元 正太 分 布 
设 o1,02, m1,m2 和 p 是 实 常 数 , 并 假定 of > 0 = 12,0 入 lpl<1. 记 


ea 人 (5 (5 (3")} 
如 果 XI 和 Xo 是 随机 变量 , 联合 分 布 为 


1 
Pr{ Xi < 他 ， 人 < b} = 三 f A exp {-3Q(u02)) QZ1d2z2 
OO iU2 


则 称 Xi,X2 具有 联合 正 态 分 布 . 容易 验证 , [Xi;] = mi(i = 1,2), Xi 的 方差 是 cg 
协 方差 为 


El(Xi — mi)(X2 — m2)) = 00102， 
且 p( 无 量 纲 变 量 ) 称 为 相关 系数 . 联合 特征 函数 为 
pxi,xa(t1,t2) = Ele ttt Xa)] 


| 1 
一 eXP (im 十 t21m2) 一 3(t101 十 2pt101t202 十 B03)| 


在 XI 和 XX2 具有 联合 正 态 分 布 , 则 已 知 Xi = zi 时 Xz 的 条 件 分 布 是 具有 如 下 概 
率 密 上 度 函 数 的 正 态 分 布 


1 Za 一 ?1 
DXa|xi(Z2|z1) = Pa s ， 一 oo < Z2 < oo， 


其 中 ， 
m = m2 + p(n — 7n1) 县 IT 一 0O2V1 一 六 
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设 llaijl| 是 xm 对 称 正定 矩阵 , | 上 bijl| 是 ljaijl| 的 道 矩 阵 , 已 = detllbijl| 是 
||6is|| 的 行列 式 . 设 mi, ? 一 1, 机 是 任意 实 常数 . 称 随机 变量 组 入 1， "° 有 具有 
联合 正 态 分 布 , 如 果 它 们 县 有 如 下 的 联合 概率 密度 函数 : 


VB 1 
D(Z1， “ , Tn ) 一 Ap { -BQ "， an ,一 OO < Ti < O00, 


其 中 ， 
Q(T1, ,Tn) = > (zi — mi)bij (zs — my). 
其 联合 特征 函数 是 
中 (二 ， ,tn) = 一 Bor D2 

二 €XPp 人 一 工 ;Dt | 
由 此 可 计算 

五 | 和 Xi 一 ?1， 2 一 二 ,用 
和 


El(Xi— mi)(Xi — mi;)] = @iy, 

因而 我 们 称 官 阵 ||aij|| 为 协 方差 矩阵 . 

从 特征 函数 性 质 易 证 ， 当 上 且 仅 当 YY = atXi 十 … 十 anXn 具有 正 态 分 布 时 ， 
及 1 0 ) 及 六 具有 联合 正 态 分 布 ， 这 里 Wi Un 是 任意 实数 . 

(b) 多 项 分 布 

多 项 分 布 是 仅 取 非 负 整 数值 0,…,n 的 r(r > 2) 个 离散 型 随机 变量 的 联合 分 
布 , 它 定 义 为 
在 向 十 … 十 嫉 三 也 


省 时 ki . hk, 
Pr{X1 = ki,:…., Xr = kr} = el. kt pr， 
) 其 他 ， 


其 中 p; > 0,1 = 1,.…,7, 且 》 jp; 二 1. 
?一 上 
它 的 联合 得 函数 为 


g(s1,..*,8r) = Els*!...sX"] 
一 (p181 十 ，:…… 十 DrSsr) ， 
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G. 极限 定理 


一 列 实数 {an} 称 为 收敛 于 实数 a, 记 为 lim an = a, 如 果 对 任意 正 数 6, 存在 
目 然 数 N(e), 使 得 对 所 有 的 > N(e), |an -al < e. 有 几 个 途径 可 以 把 这 个 收敛 性 
概念 推广 于 随机 变量 的 人 情形, 设 2, 21, 22,… 是 随机 变量 序列 

(a) 以 概率 1 收敛 

如 采 Pr{ lim Zn = 2} = 1, 则 说 Zn 以 概率 1 收敛 于 2Z. 换 句 话说 , 以 概率 1 
出 现 结 果 : 和 = z, 21 = z1, Zo = z2,"…,， 且 lim zn = Z. 

(b) 依 概率 收 化 

如 果 对 每 个 正 数 6, 成 立 lim Pr{lZ。 一 2| > e} = 0, 或 者 lim Prfl2 一 2|< 
e} = 1, 则 说 Zn 依 概率 收敛 于 Z. 换 句 话说 , 我 们 可 以 取 足 够 大 的 m 使 得 Z 任意 
接近 2 的 概率 可 达 任 意 大 . 

(c) 二 次 平均 收敛 (简称 均 方 收敛 ) 

如 果 lim El[|Zn 一 20 = 0 则 说 Zn 二 次 平均 收敛 于 Z( 简 称 Z 均 方 收敛 于 
2). 换 句 话说 , 我 们 可 以 取 足 够 大 的 mw 在 差 的 平方 平均 意义 下 2 任意 逼近 2. 

(d) 依 分 布 收敛 

设 F(t) = Pr{Z < 和 F(t) = Pr{Zy < ,上 k= 1,2,…, 如 果 im Fn(t) 一 
F(t) 对 所 有 下 的 连续 点 t 成 立 , 则 说 2 依 分 布 收敛 于 2. 

可 以 证 明 , Z 以 概率 1 收敛 于 2 可 推出 Zn 依 概率 收敛 于 2Z, 后 者 又 可 推 得 Zr 
依 分 布 收敛 于 Z. 这 样 , 依 分 布 收敛 是 收 铺 性 中 最 弱 的 形式 . 事实 上 , 可 以 证 明 每 个 
分 布 函 数 族 {Fa} 包含 一 个 序列 {Fa,} 使 得 在 下 的 连续 点 + 上 收 傅 于 F(Helly-Bray 
引 理 ), 但 这 里 玉 不 一 定 是 正常 的 分 布 函 数 , F(oo) 可 能 小 于 1. 

概率 论 的 很 多 结果 是 以 极限 定理 的 形式 出 现 的 , 下 面 仅 叙 述 其 中 的 几 个 . (我 们 
不 叙述 那些 最 弱 条 件 下 的 结果 .) 

设 Xi X2…… 是 独立 同 分 布 随机 变量 序列 , 具有 有 限 均值 m. 令 Sn = Xi 十 
… 十 XXn, Xn = Sn/n 是 样本 均值 . 

弱 大 数 定理 。” 义 ,, 依 概率 收敛 于 m. 即 , 对 任意 gs > 0, 有 


im Pr{IXy 一 ml >e}=0. 
强大 数 定理 ”人 以 概率 1 收敛 于 m. 即 ， 


Pr{ lim Xn=m}=1. 
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中 心 极限 定理 ”假设 Xx 具有 有 限 方差 2, 设 


Zn = 一 一 2 (X, 一 m) Vn, 
ON UO 


记 2Z 是 专 均值 、 单 位 方差 的 正 态 随机 变量 , 则 2 依 分 布 收 伍 于 Z. 即 , 对 于 任意 实 
数 a， 


“ 2 
] < -一 一 -ee 一 区 /2 


Borel-Cantelli 5 理 ” 设 41, 42,.… 是 独立 事件 的 无 限 序列 . 则 事件 {Ai, i.o.} 
(这 里 , i.o. 表示 无 限 地 经 常 , 意 指 有 无 限 多 数目 的 事件 4; 发 生 ) 可 由 下 式 表达 


A 一 {A;,i.o.} 一 全 UU A;. 


j=1i=;j 
Borel-Cantelli 引 理 指出 ，4。 的 概率 或 是 0 或 是 1, 分别 依 >》 Prf4i} < oo 或 
1 二] 


>》 Pr{4j} 一 DO 而 定 . 
i=] 


HH. 不 等 式 


有 者 干 不 等 式 在 研究 随机 过 程 中 起 着 重要 作用 . 我 们 仅 叙 述 其 中 的 两 个 . 
切 比 雪夫 不 等 式 ” 设 2 是 非 负 随机 变量 . 则 对 任何 正 数 c 


Pr{2 > c} < -ElZl. (1.16) 
证 明 由 于 2 是 非 负 的 ， 
ElZ| = / “zdF(s) > / ~ zdF(2) 
> ca =-c.PrfZ > ce). 


由 此 即 推 得 要 证 的 不 等 式 . 如 果 XX 是 具有 均值 jy 和 方差 c? 的 随机 变量 , 我 们 应 用 
(1.16) 于 Z = (XX 一 jp) ,使 得 


2 
0o 
Pr{Z >e’}=Pr{l/X—1|>e} < a 


施 瓦 兹 不 等 式 ” 设 义 ,Y 是 具有 有 限 二 阶 矩 的 随机 变量 , 则 


(BEXY])2 < ELX?2]E[Y?. 


有 
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证 明 对 任意 实数 和 
0< E[(X+AMY)”] = EIX*] +2AE[XY]+ AX El[Y’]. 


把 上 式 看 作 和 的 二 次 函数 , 那么 它 至 多 有 一 个 实数 根 . 因而 此 二 项 式 的 判别 式 应 当 
是 非 正 的 , 即 
4(EIXY]) < 4E[X“]EIY’), 


这 就 完成 了 证 明 . 


1.2 ”随机 过 程 的 两 个 简单 例子 


本 书 将 对 随机 过 程 各 方面 作 导 引 式 的 介绍 ， 随 机 过 程 理论 主要 研究 随机 变量 
族 {Xt} 的 构造 , 这 里 , 参数 t 取 沉 某 个 指标 集 T. 在 不 引起 混 消 的 情况 下 ,有 时 用 
天 (区 代替 Xi. 

随机 过 程 {Xi,t € T} 的 一 个 实现 或 样本 函数 , 是 指 对 每 个 1 € T, Xi 的 可 能 值 
的 一 个 指定 . 指标 集 可 以 是 离散 时 间 了 = {0,1,2,…}, 这 时 {Xt} 可 以 表示 一 系列 
试验 的 结果 , 例如 , 抛掷 硬币 的 一 系列 结果 , 智力 测验 时 对 象 的 一 系列 反应 , 或 者 对 
人 口 某 种 特征 的 一 系列 观察 , 等 等 . 

Xt 的 值 可 以 是 一 维 的 , 二 维 的 或 者 n 维 的 , 甚至 更 加 一 般 化 . 当 X 表示 第 m 
次 抛 据 角 子 的 结果 , 它 的 可 能 值 集合 是 {1,2, 3,4,5,6} 这 个 过 程 的 一 个 实现 , 臂 如 说 
是 5, 1, 3, 2, 2, 4, 1, 6, 3, 6, .…, 可 直观 表示 如 图 1-1, 其 中 t=n 的 纵 坐标 是 Xn 的 
值 . 在 这 个 例子 中 , 随机 变量 X, 是 相互 独立 的 . 但 一 般 地 说 , 随机 变量 X, 并 不 相 
互 独立 . 


图 1-1 


指标 集 工 = [0, oo) 的 随机 过 程 在 应 用 中 尤为 重要 . 此 时 t 通常 解释 为 时 间 . 

我 们 目前 先 局 限于 粗略 讨论 随机 过 程 及 其 两 个 实例 的 春 干 基本 概念 , 本 章 末 将 
简要 介绍 不 同类 型 的 随机 过 程 , 至 于 这 些 例子 本 身 的 详尽 讨论 将 在 后 继 有 关 章 节 中 
进行 . 
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例 1 一 个 非常 重要 的 例子 是 著名 的 布朗 运动 . 这 个 过 程 具有 如 下 的 特征 : 

(a) 假定 如 < 五 <… < 如 则 增 量 Xt 一 Xeo, Xt 一 和 Xi 一 Xt,_， 是 相 
互 独立 的 随机 变量 . (具有 这 种 性 质 的 过 程 称 为 独立 增 量 过 程 , 它 表 示 在 不 重 登 的 时 
闻 段 上 , Xi 的 改变 量 是 相互 独立 的 随机 变量 .) 

(b) 当 to >t1, Xi ~ Xu 的 概率 分 布 仅仅 己 tz 一切 有 关 (而 与 到 无 关 ). 

(ce) Pr[X: — Xs < 7| = [2xB(t — -2 | exp[ 一 wu /2B(t -sjjdu 其 中 ,t > 8， 
B 是 正常 数 . 

假设 对 每 一 条 轨道 Xo = 0. 这 时 , 五 Xi = 0, o*(Xi) = Bt, 这 里 B 是 固定 的 正 
常数 . 可 以 证 明 , 如 果 0 < 五 < 妇 < < 起 < 二 在 已 知 Xt, Xts,… ,Xi 时 Xi 的 
条 件 概率 分 布 由 下 式 给 出 ( 见 第 7 章 ) 


Pr{X: 和 ZX = 71,., Xt, = Tn} 


= [2xB(t — tn)] 3 ff exp[—u* /2B(t — tn )dv. 


这 个 过 程 的 历史 始 于 1827 年 布 骨 对 浸 于 液体 中 的 小 粒子 不 停 地 无 规则 运动 的 
观察 . 1905 年 爱 因 斯 坦 假 定 所 观察 的 粒子 是 受到 周围 介质 分 子 不 断 地 碰撞 而 解释 
了 这 种 运动 . 由 爱 因 斯 坦 导 出 的 解析 结果 后 来 又 被 许多 物理 学 家 及 数学 家 进一步 
验证 和 充实 . 

设 Xi 表示 布朗 运动 粒子 在 时 刻 t 的 位 移 (从 某 个 出 发 点 开始 , 沿 着 某 固定 轴 ). 
在 时 间 区 间 (s, 上 位 移 X: 一 XX 可 以 看 作 是 大 量 小 位 移 之 和 , 因此 利用 中 心 极限 
定理 , 断言 X: -- X。 呈现 正 态 分 布 看 来 是 合理 的 . 如 果 假 定 介 质 是 均匀 的 , 则 我 们 可 
以 认为 Xt 一 鲜 。 和 Xtra 一 Xs+h 的 分 布 对 任意 h > 0 都 是 相同 的 . 最 后 , 由 直观 易 
知 位 移 Xi - Xs 仅仅 取决 于 时 间 间 隔 土 - s, 而 与 我 们 开始 观察 的 时 刻 无 关 . 

布朗 运动 (也 称 为 Wiener 过 程 ) 是 研究 许多 其 他 类 型 随机 过 程 的 基础 . 第 7 章 
将 详细 讨论 一 维 布朗 运动 . 

例 2 ”连续 时 间 (T= [0, 00)) 随机 过 程 的 另 一 重要 例子 是 泊 松 过 程 . 其 样本 孙 
数 X: 表示 从 0 到 t 这 段 时 间 内 所 研究 的 事件 出 现在 次 数 , 于 是 , 每 个 样本 函数 XX 
是 不 减 的 阶梯 函数 . 

图 1-2 表示 这 样 的 一 个 样本 函数 , 事件 首先 出 现在 时 刻 ,然后 在 时 刻 t2, ts, 刀 4 
等 等 . 显然 事件 出 现 的 总 数 仅 以 单位 跳 牙 式 增 加 , 并 且 Xo = 0. 这 种 过 程 的 实例 很 
多 , 如 , 一 个 放射 性 物质 在 训 变 中 所 散发 的 X 射线 的 数目 ; 发 生 于 一 个 地 区 的 电话 
呼唤 次 数 ; 某 个 十 字 路 口 事 故 出 现 的 次 数 ; 在 一 页 内 打字 差错 出 现 的 次 数 ; 一 台 机 融 
损坏 的 次 数 ; 到 达 服 务 台 的 顾客 的 数目 . 把 上 述 这 些 例子 看 成 泊 松 过 程 的 依据 是 所 
谓 的 稀有 事件 律 . 若 我 们 有 试验 次 数 很 多 的 贝 努 里 试验 , 每 次 试验 成 功 的 概率 很 小 ， 
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而 期 望 成 功 的 次 数 是 一 常数 , 在 这 种 条 件 下 , 由 大 家 癌 悉 的 概率 论 定理 知道 , 事件 实 
际 出 现 次 数 近似 遵循 泊 松 规律 . 在 放射 性 物质 衰变 中 , 如 采 观 察 的 时 间 相 对 于 放射 
性 物质 半衰期 是 非常 短 的 , 采用 泊 松 逼近 非常 理想 . 


图 1-2 


我 们 假定 发 生 在 两 个 不 相交 时 间 区 间 的 事件 次 数 相互 独立 ( 见 (a))， 类 似 于 
(b), 我 们 也 假定 随机 变量 Xio+t 一 Xio 的 概率 分 布 只 取决 于 上 而 与 如 无 关 . 与 上 面 
直观 描述 相 一 致 , 我 们 还 进一步 给 出 如 下 假定 : 

I. 在 长 度 为 h 的 时 间 区 间 中 , 事件 至 少 发 生 一 次 的 概率 为 


p(h)=ah+i+o(lh), h—0,4>0 
[9(t) = ol),t 一 0, 表示 lim g(t)/t = 0]. 
I. 在 长 度 为 h 的 时 间 区 间 中 , 事件 发 生 两 次 或 两 次 以 上 的 概率 为 o(h). 
假定 荆 相 当 于 排除 了 同时 发 生 两 次 或 更 多 次 事件 的 可 能 性 . 在 上 列 例子 中 此 要 


求 通常 可 以 满足 . 
设 Pm(t) 表示 在 t 时 间 内 事件 恰好 发 生 m 次 的 概率 , 即 


Pn(t} =Pr{Xt=m}, m=0,1,2,... 


假定 卫 可 表示 成 下 面 形式 


ph) = Pi(h) + Pa(h) + 
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由 于 独立 性 的 假定 ， 
Plt+h)= Polt)Polh) = Polt)(1 ~ p(h)), 
i Pltth) — PR) __p np) 
h hi 


但 由 于 假定 1 , 我 们 有 p(h)/h 一 a. 由 此 推 得 在 (0,t) 内 事件 不 发 生 的 概率 Po(t) 满 
足 微分 方程 

P(t) = —aPol(t), 
它 的 解 是 众所周知 的 , 即 P(t) = ce “常数 c 由 初始 条 件 Po(0) = 1 确定 , 推 得 
c 二 1. 于 是 Po(t) =e-". 下 面 我 们 对 任意 的 m 计算 Pm(t). 显然 有 


Pn(t +h)= Pn(t)Po(h) + Pn_i(t)P(h + DP i(t)P (2.1) 


由 定义 , R(t) = 1 一 p( 有 ). 因 Pi(t) < 1, 由 条 件 开 推 得 
Pi(h) = p(h)+o(lh) 及 


了 


2 Pn-i(t)P(h) < >_ Pi(h) = olh). 


¢ 一 必 + 二 必 


(2.2) 


借助 于 (2.2), 我 们 重新 整理 (2.1) 成 为 


Pn(t+h) ~ Pn(t) = Pn(t)[Po(h) — 1 + Pn_1(t)P(h) + Y Pm i(t) Pi(h) 
t=2 


= —Pn,(t)p(h) + Pn_i(t)P(h) + )+ 5 Pm_i(t)P 
1 一 之 
一 一 Pt 十 aP -1(t)h + o(h). 


因此 ， 
m+) Tm — ~aPn(t) + aPn_1(t), (h— 0), 
从 形式 上 我 们 得 到 
P(t) = ~aPn(t} + aPn_ i(t), m= 1,2,..., (2.3) 
其 初始 条 件 为 


Pn(0) = 0, mm = 1,2,... 


六 
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为 了 解 方程 (2.3), 我 们 引入 函数 
Qmlt) = Pn(tje”’, m=0,1,2,.… 
把 此 式 代 入 (2.3), 得 
Qmlt) =aQm-i(t), m= 1,2,..., (2.4) 
其 中 Qolt) 三 1, 并且 和 初始 条 件 为 8m(0) = 0,m = 1,2,…. 应 用 递归 法 解 (2.4), 得 
Q1(t) = 二 a 或 Qi(t)=at+c， 所 以 Qi(t)=at 


02t Q2t 


WY2(t) = “3 + 所 以 Q2(t) = D7 


故 

Qa"t™ 
mi! 

换 句 话说 , 对 每 个 t, X 遵循 参数 为 at 的 泊 松 分 布 . 特别 地 , 在 时 间 t 事件 出 现 次 

数 的 均值 为 at. : 

泊 松 过 程 中 的 时 间 参 数 还 经 常 被 适当 的 空间 位 置 参数 形式 所 代替 .下 面 这 个 
例子 说 明了 这 方面 问题 处 理 的 方法 . 考虑 分 布 在 空间 E(E 是 维 数 d > 1 的 欧 儿 里 
得 空间 ) 上 点 的 排列 . 令 Na 表示 E 的 某 区 域 R 内 所 含 的 点 数 (有 限 或 无 限 ). 我 们 
假设 Na 是 随机 变量 , 其 中 R 取 遍 忆 的 所 有 可 能 的 子 集 . 随机 变量 的 集合 {NR}， 
称 为 齐 次 泪 松 过 程 , 如 果 满 足下 列 条 件 ， 

(i) 在 互 不 重合 的 区 域内 , 点 的 数目 是 相互 独立 的 随机 变量 . 

(ii) 对 于 任意 有 限 “ 体 积 ” 的 区 域 R, Na 是 均值 为 和 V(R) 的 泊 松 分 布 , 此 处 
V(R) 是 R 的 “体积 ”, 参数 入 是 固定 的 并 在 某 种 意义 下 度量 分 布 的 强度 , 它 与 R 
的 大 小 和 形状 无 关 . 空间 的 泊 松 过 程 是 在 考虑 宇宙 空间 中 星体 和 星系 的 分 布 . 动物 
和 植物 的 位 置 分 布 以 及 显微镜 下 玻璃 片上 细菌 的 分 布 等 问题 中 提出 来 的 . 这 些 思想 
和 概念 将 在 第 16 章 中 进一步 研究 . 


—0at 


Panlt) = 


1.3 一 般 随 机 过 程 的 分 类 


区 别 随机 过 程 类 型 的 要 素 是 状态 空间 的 种 类 , 指标 集 了 以 及 随机 变量 Xi 之 间 
的 相关 关系 . 
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状态 空间 $ 


状态 空间 是 每 个 X: 所 有 可 能 值 所 在 的 空间 . 各 3 = (0, 1,2,…), 我 们 称 过 程 为 
取 上 自然 数值 的 过 程 或 离散 状态 空间 过 程 . 者 9 为 实 直线 (一 o0, +co), 我 们 称 Xi 为 
实 值 随机 过 程 . 者 S 是 大 维 欧 几 里 得 空间 , 则 称 Xi 为 维 向 量 过 程 . 

和 单个 随机 变量 的 情况 类 似 , 状态 空间 的 选择 不 一 定 由 所 描述 的 物理 现象 唯一 
确定 , 但 在 实际 研究 中 , 人 们 通常 选择 其 中 最 合适 的 一 个 . 
指标 集 了 
代替 Xi. 若 了 = [0 co), 则 {Xt} 称 为 连续 时 间 过 程 . 

我 们 已 举例 说 明 指标 集 了 可 以 不 是 一 维 的 (如 空间 泊 松 过 程 ). 另 一 个 例子 是 
海洋 波浪 . 我 们 把 纬度 和 经 度 坐 标 作为 t 值 , 而 X: 是 位 置 t 处 的 波浪 高 度 . 
随机 过 程 的 古典 类 型 


我 们 现在 根据 Xt 之 间 相 关 关 系 的 不 同 来 划分 各 种 经 典 类 型 的 随机 过 程 . 如 无 
特别 说 明 , 在 例子 中 均 取 了 = [0, oo). 为 简单 起 见 , 我 们 假定 随机 变量 Xi 取 实 值 . 
(a) 平稳 独立 增 量 过 程 


在 对 任意 对 个 实 值 王 , 妇 加 和 < 妇 < .< 如 ,随机 变量 组 Xs, 一 Xs,, Xi, 一 
Xi ,Xt 一 Xi; 是 独立 的 , 则 称 {Xi} 是 独立 增 量 过 程 . 如 果 指 标 集 了 包含 有 
最 小 下 标 to, 这 时 我 们 还 假定 Xe Xt 一 Xi Xe 一 XXX 一 Xt, 是 独立 的 .如 
果 指 标 集 是 离散 的 , 即 人 = (0, 1,….), 那么 有 关 独 立 增 量 过程 问 题 在 某 种 意义 下 可 
归结 为 独立 随机 变量 序列 问题 . 事实 上 , 令 Z = Xo0,2; = Xi 一 Xil, (i = 1,2,.…)， 
则 Zo, 2Z1，,…, Zn,… 是 独立 随机 变量 序列 . 如 果 我 们 知道 了 Zo, 21,'…, 2n,… 各 卓 
的 分 布 函数 , 就 能 确定 (很 显然 ){Xi} 的 任何 有 限 维 联合 分 布 , 因为 


Xi 二 Zo 二 i 十"…: 十 Zi， $= 二 0,1,2,.…. 


如 果 增 量 式 蝗 十 由 一 天 全 ) 的 分 布 仅仅 依赖 于 区 间 长 度 h 而 与 太 无 关 , 则 此 过 
程 称 为 平稳 增 量 过 程 . 对 于 平稳 增 量 过 程 , 不 论 人 怎样 的 如 ,ta 以 及 h(t 十 h) 一 外 (1) 
的 分 布 与 (to 十 hh 一 X( 思 ) 是 相同 的 . 

如 果 过 程 {XtteT} 具有 平稳 独立 增 量 , 是 具有 有 限 均值 , 这 里 下 = [0,oo) 或 
人 = (0,1,2,…), 则 可 用 初等 方法 证 明 E[Xi] = mo 十 mit, 其 中 mo = ElXol],mi = 
五 [Xi] 一 mo. 类 似 的 结论 对 于 方差 也 成 立 ; 


OX, 三 oo + ait 


其 中 , 08 = E[(Xo mo)?],o? = E[(Xi — mi)?] ~ o8. 
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我 们 将 给 出 均值 情形 的 证 明 . 设 /和 = E[Xit] -五 [Xol. 则 对 任何 上 二 和 8 


f(t+ 8s) = E[X:+s — Xol 
= E[X;, — Xs + Xs — Xol 
= ElXts — Xs| + EI[Xs — Xol 
= ElX: — Xol + E[Xs — Xol 


(利用 平稳 增 量 的 性 质 ) 
= f(t) + f(s). 
在 运 当 的 条 件 下 , 图 数 方程 ft+s) = f(D 十 f(s) 只 有 解 f(t) = f(1).t. 我 们 将 在 假 


定 f(t) 可 微 的 条 件 下 (显然 此 条 件 可 进一步 削弱 ) 给 出 这 个 结果 的 证 明 . 对 函数 方 
程 两 边关 于 上 和 s 分 别 独立 地 求 微分 , 得 到 


f(t+s)= f(t)= f(s). 


因此 , 当 s = 1 时 , 我 们 有 f(t) = f'(1) = c. 解 此 初等 微分 方程 得 f(t) = ct +d. 但 
由 f(0) = 2f(0) 知 1(0) = 0, 必 有 d= 0. 由 此 得 c = f(1). 表达 式 f(t) = f(1)t 实 
际 上 就 是 

五 区 一 mo = (E[X1]— mo)':t 


或 
ElXtl 一 1720 十 m1t, 
这 就 是 我 们 要 证 明 的 . 
布 妆 运 动 和 泊 松 过 程 都 是 平稳 独立 增 量 过 程 . 
(b) 凌 


设 {Xi} 是 离散 指标 或 连续 指标 的 实 值 随机 过 程 . 若 对 于 任意 的 t, El|Xil| < oo， 
且 对 任意 卖 < 妇 < …< tn+1 以 及 任意 实数 a1,a2,… ,Qn 五 { At 有 和 二 Q1, 和 AA 一 
Qa2,… ,Xt 二 an = an 则 称 {Xt} 为 驶 、 当 Xe 表示 时 刻 t 赌 徒 可 拥有 的 赌 本 ， 
堵 可 作为 描述 公平 赌博 的 模型 . 拷 的 性 质 表示 赌 徒 在 已 知 时 刻 如 拥有 赌 本 an 的 
情况 下 , 时 刻 如 +1 拥有 赌 本 的 平均 值 仍 然 为 an, 而 与 他 在 时 刻 如 以 前 拥有 的 赠 
本 无 关 . 读者 容易 验证 , 当 Zi(i = 1,2,…) 是 相互 独立 且 均 值 为 0 的 随机 变量 时 ， 
Xn = 21 十 22 十 … 十 Znsn 二 1,2,…, 是 一 个 离散 时 间 鞠 . 类 似 地 , 者 XX,,0 < t < oo， 
具有 独立 增 量 且 均 值 为 0, 则 {Xi} 是 连续 时 间 蔷 ( 见 初等 问题 6). 

观 是 第 6 章 研 究 的 主要 内 容 . 
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(c) 马尔 可 夫 过 程 


粗略 地 说 , 马尔 可 夫 过 程 是 这 样 一 类 过 程 , 如 果 已 知 Xi 的 值 , 则 对 任意 的 s,4,s > 
t > 4, 义 。 的 值 与 Xu 的 值 不 相关 , 即 当 准确 地 知道 现在 情况 时 , 该 过 程 任何 将 来 的 
某 种 性 质 的 概率 并 不 受过 去 性 质 所 影响 . 然而 , 当 这 个 过 程 现 在 情况 还 不 清楚 时 , 将 
来 某 性 质 的 概率 一 般 要 受 该 系统 过 去 情况 所 影响 . 用 数学 式 子 来 表达 , 所 谓 马 尔 可 
夫 过 程 {X}, 是 指 对 任意 五 < 妇 < < 如 < 


Pr{a < 和 < blX:, = 71, Xt, = Zo, Xe, = Zn} 


= Pr{a < Xt < bXe, = rn}. (3.1) 
设 4 是 实 直 线 上 一 个 区 间 , 函数 
P(z,s;t, A) =Pr{X € AIX, =7}, t>s, (3.2) 
称 为 转移 概率 函数 . 它 是 研究 马尔 可 夫 过 程 物 造 的 基础 . 我 们 可 将 条 件 (3.1) 改 为 
Prfae< Xe < biXe, = 1, Xt, = ,Kes = Tn} = P(rntnit, A), (3.3) 


其 中 4 = {tla <& < 9}. 可 以 证 明 , (Xz, 半 t,，… ,Xi,) 的 联合 概率 分 布 可 由 转移 函 
数 (3.2) 和 Xi, 的 初始 分 布 函数 确定 , 稍 后 (第 2 章 ) 在 介绍 高 散 时 间 、 离 散 状 态 空 
间 的 马尔 可 夫 过 程 时 , 将 详细 说 明 上 述 概 念 . 

状态 空间 是 有 限 或 可 数 的 马尔 可 夫 过 程 又 称 为 马尔 可 夫 链 . 所 有 样本 函数 (或 
实现 ) 是 连续 函数 的 马尔 可 夫 过 程 {Xi,t € [0, oo0)} 称 为 扩散 过 程 . 泪 松 过 程 是 连续 
时 间 的 马尔 可 夫 链 , 布衣 运动 是 扩散 过 程 

(d) 平稳 过 程 

一 个 随机 过 程 {Xt,t Ee TT}( 其 中 荆 可 以 是 (-oo,+oo)、[0,oco)、 所 有 整数 集合 或 
所 有 正 整 数 集合 ) 称 为 严格 平稳 的 , 如 果 对 任意 h > 0 和 任意 妈 , 妇 ……t 如 ET, 随 
机 变量 组 

(Ab Hi Ktaths Xtnth) 和 (Kir, Xt, Xt) 


的 联合 分 布 函数 相同 . 这 个 条 件 指出 该 过 程 依 概率 意义 是 均衡 的 , 我 们 在 哪个 具体 
时 刻 观察 此 过 程 是 无 关 紧 要 的 . 特别 地 , 对 任意 时 刻 t, Xi 的 分 布 者 相同. 

称 随机 过 程 {Xi,t € T} 为 宽 平 稳 的 或 协 方 奖 平稳 的 , 如 果 每 个 Xe 具有 有 限 二 
阶 矩 , 并 且 对 任意 的 t, Cov(Xt, Xi 二 忆 (XEXith) 一 (Xt)E(Xitn) 仅仅 取决 于 上 h. 
具有 有 限 二 阶 矩 的 严格 平稳 过 程 是 协 方差 平稳 过 程 . 同时 也 存在 非 严格 平稳 的 协 方 
差 平稳 过 程 . 

平稳 随机 过 程 作为 描述 许多 现象 的 数学 模型 是 适当 的 , 例如 在 通讯 理论 、 天 文 
学 、 生 物 学 , 甚至 在 经 济 学 中 , 都 需要 平稳 过 程 . 这 方面 的 详细 讨论 将 在 第 9 章 进行 . 
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称 马尔 可 夫 过 程 具有 平稳 转移 概率 , 如 果 P(x, s;t, 4)( 见 (3.2)) 仅 是 +1 一 s 的 邯 
数 . 注意 到 P(x, s;t, 4) 是 已 知 现在 情况 的 条 件 概 率 , 因此 没有 理由 认为 具有 平稳 转 
移 概 率 的 马尔 可 夫 过 程 是 平稳 过 程 . 事实 也 确实 如 此 . 

泊 松 过 程 和 布朗 运动 都 不 是 平稳 的 . 事实 上 , 不 存在 非常 数 的 平稳 独立 增 基 过 程 
是 平稳 过 程 . 然而 , 如 果 {Xi,t e [0,co)} 是 布 庆 运动 或 泊 松 过 程 , 则 Zi = Xtth 一 XX 
对 任意 固定 h 是 平稳 随机 过 程 . 

(e) 更 新 过 程 

更 新 过 程 是 独立 同 分 布 正 随机 变量 序列 {了 T=1,2.…, 这 里 表示 菜 “ 元 件 ” 
的 寿命 . 第 一 个 元 件 在 时 刻 零 开始 使 用 , 在 时 刻 歼 坏 了 以 后 马上 换 上 第 二 个 元 件 
使 用 , 在 时 刻 五 + 72 损坏 后 又 换 第 三 个 元 件 , 如 此 继续 下 去 , 因此 称 其 为 “更 新 过 
程 ”. 第 n 次 更 新 时 间 是 5% = 五 十 了 十 十 TI. 

更 新 计数 过 程 {Ni} 表示 在 时 间 区 间 [0,4] 更 新 的 数目 ( 见 图 1-3), 即 


Ni: = 7, 当 Sn &t < n+l) n = 0,1,2,.... 


通常 我 们 并 不 特意 区 分 更 新 过 程 及 与 其 关联 的 更 新 计数 过 程 , 两 者 不 会 发 生 混 
清 . 


0 
一 一 个 一 sh 1 - 包 
50 S, S, 
图 1-3 


更 新 过 程 直接 出 现在 许多 应 用 领域 , 诸如 管理 科学 、 经 济 学 和 生物 学 等 . 另外 
十 分 重要 的 是 , 其 他 类 型 的 随机 过 程 初 看 起 来 完全 与 更 新 过 程 无 关 , 却 常 有 更 新 过 
程 嵌 入 其 中 , 第 5 章 将 致力 于 研究 更 新 过 程 

带 有 参数 和 的 泊 松 过 程 是 更 新 计数 过 程 , 其 元 件 寿命 具有 参数 为 和 的 指数 分 
布 . 

(f) 点 过 程 


设 S 是 ” 维 空间 的 一 个 集合 , & 是 5 的 一 个 子 集 族 . 点 过 程 是 指标 集 为 集合 


26 第 1 章 随机 过 程 初步 


4e of 并 以 非 负 整数 集 {0,1 ……oo} 为 状态 空间 的 随机 过 程 . 我 们 可 以 想象 “点 ” 
以 某 种 随机 方式 散布 在 9 上 , N(4) 表示 落 在 集 4 里 的 点 数 . 由 于 N(4) 是 计数 函 
数 , 因此 对 每 个 实现 应 附加 某 些 要 求 . 例如 , 如 果 41 和 hz 是 x 中 不 相交 的 集合 ， 
4i U42 也 属于 sx, 则 我 们 要 求 


N(AiUA2) = NU4i) + N(A,), 


如 果 空 集 g 也 属于 of, 则 N(@) = 0. 

假设 9 是 实 直线 (平面 或 三 维 空 间 ) 的 一 个 集合 , 对 于 每 个 子 集 4 C 5, 设 V(A4) 
表示 4 的 长 度 (对 应 地 , 面积 或 体积 ), 称 {N(4), 4 C 5} 是 强度 为 和 > 0 的 齐 次 泊 
松 点 过 程 , 如 果 满 足 ， 

(i) 对 每 个 4 C 9 N(4) 为 具有 参数 和 V (4) 的 泊 松 分 布 ; 

(ti 对 5S 的 个 不 相交 子 集 {41,…, An}, 随机 变量 N(41),…,N(4;) 是 独立 
的 . 

泊 松 点 过 程 产生 于 对 衬 宙 至 间 星 体 和 星系 的 分 布 、 植 物 和 动物 的 平面 分 布 以 
及 细菌 分 布 等 问题 的 研究 . 这 些 思想 和 概念 将 在 第 2 卷 第 16 章 进 一 步 研究 . 

每 个 泊 松 过 程 {Xi,t € [0,co)} 确定 9 = [0,co) 上 的 一 个 泊 松 点 过 程 . 事实 上 ， 
对 于 任意 区 间 4 = (s,4],s <t, 可 令 N(4) = ,一 六。. 


1.4 随机 过 程 的 确定 


一 个 随机 过 程 {Xe} 的 特征 主要 在 于 随机 变量 Xi(t e T) 之 间 的 相互 关系 . 这 
至 关系 由 该 过 程 所 有 有 限 个 随机 变量 的 联合 分 布 函数 所 确定 . 在 本 书 中 , 当 过 程 的 
指标 集 . 状态 空间 以 及 有 限 维 联合 分 布 函数 族 被 指定 , 则 认为 该 过 程 已 被 确定 . 然 
而 , 在 处 理 连续 参数 随机 过 程 时 都 出 现 了 某 种 困难 . 我 们 用 下 例 来 说 明 . 

设 U 是 在 [0,1] 上 均匀 分 布 的 随机 变量 , 并 定义 X: 和 如 下 : 


通过 简单 计算 可 知 , {Xt} 和 {Ys} 具有 相同 的 有 限 维 分 布 族 . 然而 , 显然 有 
pr {xX < > 对 于 所 有 0<t< 1| =0 


1 


pr {Y <3 对 于 所 有 0<t<1} =1 


初等 问题 27 


这 确实 使 我 们 感到 为 难 . 为 了 指出 产生 此 困难 的 原因 , 可 考虑 下 面 问题 . 

假设 {Xi,0 < t < ool 是 连续 参数 随机 过 程 , 我 们 欲求 概率 Pr{Xt > 0,0 <t< 
1}. 

考虑 递减 事件 序列 


An = {Xe 2 0,6 =i/2",i=0,1,...,2"},n = 1,2,... 


值 lim Pr{An] 作为 Pr{Xt > 0,0 < t < 1j}. 表面 上 看 来 这 似乎 是 合理 的 . 但 是 , 这 
种 表面 上 的 合理 性 却 未 必 无 矛盾 . 我 们 考虑 事件 列 


A = {Xi >0,ti=1/3",1i=0,1,...,3"}, 


取 极 限 值 lim Pr{A%} 作为 Pr{X: > 0,0 < t < 1} 似乎 同样 合情合理 , 可 是 等 式 
jim Pr{An} = lim Pr{4%} 绝 不 是 显然 的 . 事实 上 , 者 无 随机 过 程 样 本 函数 “光滑 
性 ”的 假设 , 此 二 极限 值 并 不 一 定 相 等 . 要 使 这 两 个 极限 相等 , 有 者 干 不 同 的 充分 条 
件 , 其 中 之 一 是 , 对 任意 s > 0 和 任意 t, lim Pr{|Xi 一 X7| > e} = 0. 在 这 个 条 件 下 ， 
我 们 把 Pr{X: > 0,0 < t < 1} 定义 为 这 两 个 极限 的 共同 值 就 不 会 引起 矛盾 . 实际 
上 上 , 看 己 , 刀 是 区 间 [0,1 上 的 稠密 集 , 则 Pr{Xt >0,0<t<1}= lim Pr{Xt, > 
0 一 1 2 ,PP 

上 述 问题 的 症结 在 于 , 根据 全 概率 公理 , 关于 随机 变量 序列 事件 的 概率 虽然 可 
以 用 含有 该 序列 的 有 限 子 集 (因而 是 可 数 子 集 ) 的 事件 的 概率 来 计算 , 但 是 , 现在 我 
们 所 遇 到 的 事件 {Xt > 0,0 < t < 1} 都 包含 了 不 可 数 个 随机 变量 . 关于 这 方面 问题 
的 详细 讨论 是 十 分 复杂 的 , 已 超出 本 书 的 范围 , 有 兴趣 的 读者 可 参考 Doob 书 的 第 
2 章 . 有 助 于 理解 这 方面 问题 的 一 些 基 本 事实 将 在 本 书 第 14 章 了 予以 讨论 . 


初等 问题 
1. 设 X 是 可 能 值 为 0, 1, 2, … 的 非 负 离 散 随机 变量 , 证 明 
E[X] = 3 Pr{X >n}= 3 Pr{X > k}. 


= 人 0 


提示 : E[X] = > npr{X = 对 = Y、 Y、 Pr{X =n}. 


nl1 k=1 


2. 假设 一 个 久子 里 有 几 张 标 有 号 码 1,2,…,n 的 纸 片 , 某 人 抽出 其 中 一 张 后 放 回 , 再 抽 
一 张 随后 又 放 回 ， _- 寺 到 他 抽 到 先前 已 经 抽 过 的 纸 片 时 停止 令 XX 表示 达到 目的 时 抽取 的 
次 数 . 试 求 六 的 概率 分 布 . 


1. J.L. Doob, Stochastic Processes, Wiley New York, 1953. 
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提示 : 先 计 算 Pr{X > &} 最 容易 . 
答 娄 : p(k) = (k ~ 9 人 ) 气 


1 nr 


3. 试 证 问题 2 中 随机 变量 X 的 期 望 是 


B(xX)=2+ (1-3)+(1-2) (1-2)+.+ (1-2) (2) ) 
提示 : 利用 初等 问题 1. 


4. 某 工 厂 在 一 周 内 出 现 事 故 的 次 数 是 均值 为 A、 方差 为 o? 的 随机 变量 , 在 不 同事 故 中 
损坏 的 个 体 数 目 彼此 独立 地 服从 均值 为 v、 方差 为 ~” 的 分 布 . 试 确定 在 一 周 内 损坏 的 个 体 
数目 的 均值 和 方差 


答案 : 均值 为 jv, 方差 为 v2g? + Apr” 

5. 知 我 们 按 参数 为 和 的 泊 松 随机 变量 X 进行 观测 , 此 时 , 成 功 概率 为 p 的 二 项 事件 恒 
复 X 次 , 并 且 观 测 到 o 次 成 功 , 试问 o 的 分 布 是 什么 ? 

提示 : 利用 随机 变量 随机 和 的 母 孙 数 . 

答 娄 : 泊 松 分 布 , 其 参数 为 Ap. 

6. 证 明 ; 均值 为 0 的 独立 随机 变量 X， 之 和 Sn = Xi 十 … 十 XX, 构成 一 个 著 . 这 里 假 
设 EXkH < 00, 对 于 有 = 1,2,.…. 

7. 证 明 带 有 独立 增 量 的 随机 过 程 {X(2),t = 0,1,2,…} 是 马尔 可 夫 过 程 . ( 注 ， 此 结论 
对 于 随机 过 程 {X 人 ,一 oo < t < co 不 成 立 .) 

8. 设 有 ?m 对 夫妇 , 其 中 第 i 对 夫妇 生男 孩 的 概率 为 Pi, 并且 孩子 数 的 期 望 值 为 c. 假 
设 所 有 各 对 的 pi 都 与 时 间 无 关 , 任 一 对 相继 出 生 的 孩子 的 性 别 是 独立 的 随机 变量 ,并 且 假 
设 没 有 多 胞 胎 出 生 . 定义 性 别 比 为 


5 _ “对 夫妇 出 生男 孩 的 期 望 雪 
n 对 夫妇 出 生 和 孩子 的 期 望 数 


假定 ci = c,i= 1,2,…,n. 求 5S. 
答案 ;, S= So = (Sa) /rn 
+ 三 1 


(以 下 问题 9~13 的 条 件 同 问题 8,) 
9. 若 所 有 双亲 决定 , 生出 一 个 男孩 就 停止 生育 . 试 证 


1, 对 于 有 =2,3,.……n 十 1 


S=5=———&<So. 


10. 假设 所 有 双亲 决定 , 若 他 们 的 第 一 个 孩子 是 男孩 , 则 继续 生育 直到 生 女 孩子 为 止 ; 若 
他 们 的 第 一 个 孩子 是 女孩 , 则 继续 生育 直到 生男 孩 为 止 . 试 计算 在 这 种 生育 计划 之 下 的 5. 


站 其 29 


人 答 业 ; 
{> 1/g; 一 Dr 
GS _ 9。 _ = + 二 1 
Dipig] 一 
1 二 1] 
其 中 qi = 1 一 pi. 


11. 假如 所 有 双亲 决定 , 若 他 们 的 第 一 个 孩子 是 男孩 , 则 继续 生育 直到 生 女 孩 为 止 ; 若 
他 们 的 第 一 个 该 子 是 女孩 就 不 再 生 了 . 试 计算 对 应 的 5. 


答案 : 
5=5Ss=1-|- 一 -| 
》 1/q 
+ 二 1 


12. 证 明 : 或 者 S$。 < So, 或 者 5。 > So, 这 取决 于 {pi1,p2,… ,pn} 的 值 , 其 中 So 是 初等 
问题 8 的 性 别 比 ,Sa2 是 初等 问题 10 的 性 别 比 . 

13. (a) 假设 n 对 双亲 中 第 i 对 双亲 生 的 孩子 得 病 的 概率 是 pi,i = 1,2,…,n. 车 有 一 
个 病 孩 出 生 则 其 双亲 不 敢 再 生育 . 令 s = 一 个 家 庭 没有 病 孩 出 生 时 其 子女 的 数目 . 假定 p; 
与 前 面 的 出 生 情 况 无 关 . 试 证 明 


入 


(1— 4) 
R。_ 有 病 孩 子 的 期 望 数 7 


“出生 孩子 总 数 的 期 记 值 SC op 


(b) 假定 两 个 病 护 (而 不 是 一 个 ) 的 出 生 将 使 其 双亲 不 敢 再 生育 . 证 明 在 这 种 限制 之 下 


>》 {2(1 — qf) -spig ”!} 
R» — Et 一 二 


> (2G- 9/ 四 -st 


回 题 


下 述 积分 在 某 些 问题 中 可 能 有 用 , 现 列 于 此 , 以 供 参考 . 
定义 合 玛 函数 为 _ 
T(z) = / ce *dt, rz>0. 


对 于 较 大 的 z,T(z) ~ V2re-zs+l/ (斯 特 林 公 式 ). 当 z = n( 正 整数 ) 时 , T(n) = (n 一 了 D)!= 
(n— Dn—2)...2x1. 
Beta 积分 定义 为 


FJF(G) fs eg 
r= (1 一 2Z) dz, 
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其 中 , p > 0,g > 0. 
1. 设 a,b,c 是 (0, 1) 上 均匀 分 布 的 独立 随机 变量 . 试 求 cz” + bz 十 c 有 实 根 的 概率 . 
答案 : (5 十 3In4)/36. 
2. 对 于 每 个 固定 的 入 > 0, 设 X 具有 参数 为 和 的 泊 松 分 布 , 假设 和 本 身 是 服从 械 分布 
的 随机 变量 ( 即 具有 密度 


其 中 n 是 固定 正常 数 ). 试 证 明 


TT(k+n) TAN 加 和 
Pr{X = = (3) , k=0,1, 。 
当 n 是 一 个 整数 时 , 这 是 p = 3 的 负 二 项 分 布 

3. 对 每 个 固定 p, 令 X 具有 参数 为 p 和 N 的 二 项 分 布 . 假设 N 本 身 具有 参数 为 q 和 
M(M > 和 N) 的 二 项 分 布 

(a) 解析 地 证 明 X 具有 参数 为 pg 和 M 的 二 项 分 布 . 

(b) 对 此 结果 给 予 概率 上 的 说 明 . 

4. 对 每 个 固定 p, 令 X 具有 参数 为 p 和 的 二 项 分 布 . 假设 N 本 映 具 有 参数 为 ” 和 
s 的 Beta 分 布 . 试 求 复合 结果 X 的 分 布 . 何 时 此 分 布 为 x = 0,1……N 上 的 均匀 分 布 ? 

INTFC+sIER 二 PITEON 一 大 十 s) 
伟业 : Frt 人 一 针 一 时 T(r)T(s)T(N+r+s) 
Pr{X = 同 = 万 -| 当 r+= 二 s 二 1 时. 

5. (a) 设 X 服从 参数 为 入 的 泊 松 分 布 , 参数 和 本 身 是 随机 变量 , 服从 均值 为 1/c 的 指 
数 分 布 . 求 X 的 分 布 . 

(b) 如 果 入 服从 阶 数 为 a, 比例 参数 为 c 的 工分 布 , 即 和 的 密度 是 


对 入 > 0; 其 余 为 0. 此 时 X 的 分 布 如 何 ? 
答案: (a.) Pr{X 一 k} 一 (c+ r+ 


fy k+atti 
随机 样本 , 设 Y 是 随机 样本 的 中 位 数 . 证 明 Y 的 分 布 律 是 


k—l\i/N—k 
n n 
Pr{fY =k} = 一 -一 一 一 一 一， 对 于 下 三 见 十 1 十 2 和 一刀 . 
N 


2n 二 + 1 


1 


问 题 31 


验证 N+l N—2 lJ(N+!l 
BY = 和 Varl(Y) =- 


设 X 是 随机 样本 的 最 大 数 . 证 明 X 的 分 布 律 是 


Cy 
nD—l1 
Pr{X = k} = 


一 一 一 ， 对 于 kk 二 n,n 二 +1:…,N. 
N 
n 


验证 
_n(N—n)(N+1) 


EIX] = CN th), Varl(X)= Ti) 


8 设 XX! 和 Xa 是 在 区 间 |0 - 3,9 + 下 | 上 均匀 分 布 的 独立 随机 变量 证 明 Xi - X， 
的 分 布 与 9 无 关 , 并 求 此 分 布 的 密度 函数 


答案 : 
1 十 9， -~l<y<0, 
fx1-x2(y) = | l—-y, 0O<y<l1, 
0， 人 > 1 


9. 设 X 是 非 负 随机 变量 , 分 布 函数 为 F(z) = Pr{X < zj. 证 明 


E[X] = / 1 F(o)ldz. 


提示 : E[X] = 人 zdF(z) = 有 (f oy) do) 


10. 设 XX 是 非 负 随机 变量 并 令 


X.c = min{ X, c} 
-| 
c， 若 革 > 
其 中 “是 已 知 常数 , 试 利用 分 布 函数 F(z) = Pr{X < z} 表示 期 望 BIX.} 
答案 : EF[Xc| =-/ [1 ~ F(x)ldx. 
11. 设 铸 和 YY 是 具有 可 能 值 0,1,2,… 的 离散 型 随机 变量 , 对 于 |s| < 1,|t| < 1, 定义 
联合 母 陋 数 


bx, (s,t) = 2》, s Pr{X = 站 YY = 人 
“一 昌 
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和 边沿 母 郴 数 
px(s) = 3 s'Pr{X = 针 ， 
t=0 


gr 人 = > #Pr{Y = 让}. 
j=0 
(a) 试 证 明 , XX 和 YY 是 独立 的 当 且 仅 当 
px,r (s,t) = Bx(s) : $Y (的 ,对 于 所 有 s,t. 
(b) 试 给 出 随机 变量 X 和 YY 的 具体 例子 , 这 里 三 和 了 不 独立 , 但 满足 


px,r(t,t) = gx(t) -pr(t) 对 于 所 有 的 


(注意 到 Gx,r (t,t) 是 关 十 Y 的 母 阻 数 , 因此 , 此 例 说 明 虽 然 由 独立 性 可 推 得 随机 变量 
和 的 母 函 数 是 其 边缘 母 函 数 的 乘积 , 但 反之 不 成 立 .) 

12. 现 有 作为 某 试验 结果 的 r+l1 个 事件 Ao, 4 ，4r. 令 pi 是 Ai(i =0,1,,2,...,7) 
出 现 的 概率 . 若 我 们 独立 地 进行 试验 直至 事件 Ao 出 现 有 次 为 止 . 设 X; 是 事件 4; 出 现 的 
次 数 . 试 证 明 


pr {x = XT1,'… ,Xr 二 Xr; Mo 在 (e+ Da) 次 试验 中 出 现 次 | 


+ 二] 
I C 十 Y、 = ，。 
= 一 -一 二 一 上 由 2 (D 
r(k) [lz 和 


和 = 


13. 证 明 带 有 参数 (k; po, pl …… ,Pr) 的 负 多 项 分 布 (1) 的 概率 母 函 数 是 


。 _k 
g(t) 二 吉 加 2 
14. 考虑 随机 向 量 {Xo, XXX 它 服 从 参数 为 (n; po,pi1,:… ,pr) 的 多 项 分 布 ; 并 设 
n 本 身 是 一 个 随机 变量 . 服从 参数 为 (k,p) 的 负 二 项 分 布 . 试 求 Xo, Xi1,…,X; 的 联合 分 布 
15. 设 一 批 签 分 成 0,1,…," 等 级 , 每 一 等 级 分 别 有 m,ni,…,n: 条 . 我 们 一 条 接 一 条 
无 返回 地 抽取 , 直到 第 0 等 级 签 抽 满 k 条 时 停止 . 试 证 第 1,…," 等 级 的 签 被 抽 到 的 频数 
XXXr 的 联合 分 布 为 


Pr{ Xi 一 Tt ;及 一 Zr} 
_ 7 I] Ti mn m—(k—1) 
AR 一 Ai 十 一 1 | m+n-(k+i+y—1) 


其 中 , y=》 xin = 》_ni 


t=1 i=1 


[5] 题 33 


16. 继续 问题 15. 如 果 m 一 co 和 n 一 o% 使 得 m/(m 二 ml) 一 po 和 ni/(m 十 部) 一 
psi 二 1,2,.…,7, 证 明 问题 15 的 分 布 通 近 负 多 项 分 布 

17. 随机 变量 Xn 取 值 ,上 = 1,2,…,n, 取 各 信 的 概率 均 为 二. 试 求 它 的 特征 函数 及 
n 一 o0 时 的 极限 , 然后 求 极限 特征 函数 对 应 的 随机 变量 

答案 : (8) pn) = (1 -ei ot 

(b) 在 (0,1) 的 均匀 分 布 

18. 利用 对 于 适当 的 泊 松 随机 变量 的 中 心 极限 定理 证 明 


,nen 1 
Je "DH 
“19. 设 随机 变量 关 和 Y 具有 如 下 性 质 : X 是 正 的 , 即 Pr{X > 0} = 1, 且 有 连续 密度 
函数 f(z),YIX 服从 {0,X} 上 的 均匀 分 布 . 试 证 明 , 如 果 YY 和 XX 一 是 独立 的 , 则 
f(x)=a’rze "”, xz>0,a>0. 


*20. 设 U 是 阶 数 为 p 的 工分 布 , V 具有 参数 为 gq 和 pp 一 gq(0 <g<p) 的 Beta 分布. 假 
定 UV 和 V 独立 , 试 证 明 UV 是 阶 数 为 g 的 工分 布 . 


提示 : 
ff fs pi YE (1 -0 dé 
puvV <z}= | (/ eA 四 i 
两 边 取 拉 普 拉 斯 变换 , 改变 积分 顺序 , 然后 利用 香 级 数 展开 式 
(1—W) =) ( > 


k= 二 0 


"21. 设 X 和 Y 是 有 连续 密度 函数 f(z) 的 独立 同 分 布 的 正 随机 变量 , 且 f(z) > 0. 进 
一 步 假 设 U = 一 了 和 VV = min(X,Y) 是 独立 的 随机 变量 . 证 明 对 某 个 入 > 0 成 并 


Ae**, xX>0, 
/=| > 


提示 : 首先 证 明 U 和 V 的 联合 密度 函数 是 
fuv w+) = fv): fv + oo). 


然后 使 其 等 于 U 和 V 的 边缘 密度 的 冬 积 . 
22. 设 XX 和 YY 是 两 个 相互 独立 、 取 非 负 整数 值 的 随机 变量 , 对 于 所 有 非 负 整数 > 和 y， 


en 
Pr{X = 了 ZX +TY =7+Yy} = 一 一 一 一， 


m 二 +n 
TT+Yy 
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其 中 m 和 n 是 已 知 的 正 整 数 . 假设 Pr{X = 0} 和 Pr{Y = 0} 是 严格 正 的 . 证 明 X 和 YY 具 
有 相同 参数 p 的 二 项 分 布 , 男 一 参数 分 别 为 m 和 7. 
23. (a) 设 X 和 YY 是 独立 的 随机 变量 , 满足 


Pr{X = = f(i), Pr{Y =1} = 9(0), 


其 中 
f(i) >0, 9g(1) >0, i=0,1,2,..., 
县 OO Oo 
Df(i)= ,9(i)=1 
+ 二 人 2 一 昌 
假设 
/1 大 [一天 
wor | (1) (1—p) , Ogk<Ll 
0, k>l! 
证 明 z z 
1G) =e "0, g() =e ? 二 0,1,2,.…, 
其 中 , a = p/(1 一 p),9 > 0 是 任意 的 . 
(b) 证 明 p 由 条 件 
1 -1 
ce) = 而 
确定 . 


提示 : 令 F(s) = >》 f(i)s',G(s) = 》 9(i)s', 首先 证 明 关系 式 
FF = Fl(vp+ (1— pu)G(vp + (1— p)u). 


24. 设 X 是 非 负 整数 值 随机 变量 , 其 概率 母 函 数 为 f(s) = 》 ans". 通过 观测 X 次 ， 
nn 二 0 


导出 成 功 概率 为 p 的 X 次 二 项 试验 . 设 Y 表示 复合 结果 成 功 次 数 . 

(a) 试 确定 Y 的 概率 母 函 数 . 

(b) 试 确定 在 已 知 了 = X 的 条 件 下 X 的 概率 母 函 数 . 

谷类 : (a) f(1 — p+ps); (b) f (ps)/f(p). 

25. (问题 24 的 继续 ) 设 对 每 个 p(0 < p < 1), (a) 和 (b) 的 概率 母 函 数 相同 , 试 证 明 X 
的 分 布 是 泊 松 的 , 即 对 某 个 入 > 0 有 f(s) = ex(- 1 

26. 关于 股票 价格 变化 的 统计 分 布 , 或 更 一 般 地 , 关于 股票 价格 序列 的 随机 模型 ,至 少 
存在 四 个 不 同学 派 . 就 其 追随 者 人 数 而 言 , 非常 流行 的 一 种 方法 是 所 谓 的 “市 场 分 析 ”, 使 用 
了 诸如 短期 趋势 , 维持 和 忍受 水 平 , 市 场 反应 , 等 等 . 与 这 种 专业 化 的 观点 不 同 的 另外 两 个 学 
派 认 为 价格 序列 是 一 个 随机 游 动 , 价格 的 变化 与 以 前 价格 是 统计 独立 的 . 但 这 两 个 学 派 在 选 
择 适 当 的 概率 分 布 方面 意见 有 分 歧 . 一 些 人 认为 价格 的 变化 服从 正 态 分 布 , 而 另 一 些 人 认 
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为 此 分 布 应 具有 “ 重 尾 概率 ”, 甚至 具有 无 限 的 方差 . 第 四 个 学 派 (与 前 两 个 有 交叉 ) 赞成 把 
随机 游 动作 为 第 一 级 逼近 , 但 指出 第 二 级 的 影响 . 

这 道 练习 题 欲 说 明 上 述 中 间 两 个 学 派 观点 之 间 的 协调 性 . 人 们 已 经 注意 到 , 那些 认为 价 
格 变 化 是 依 正 态 规律 的 人 是 在 固定 的 交易 次 数 中 测量 价格 的 改变 , 而 那些 认为 价格 改变 具 
有 重 尾 概率 的 人 是 在 固定 时 间 区 间 内 测量 价格 的 改变 , 在 此 期 间 进 行 的 交易 次 数 是 随机 的 . 
设 2 是 价格 的 变化 量 . 用 来 度量 “ 重 尾 性 ”( 对 此 尚 有 争议 ) 的 是 超出 量 ， 


?2 = [ma/(m2)]—3 


的 系数 , 其 中 mx 是 2 关于 其 均值 的 第 大 阶 矩 

假设 在 每 次 交易 中 价格 以 相等 的 概率 上 升 一 个 单位 或 下 降 一 个 单位 ，N 表示 交易 的 次 
数 , 记 2 = Xi + X2 十 … 十 XN, 其 中 Xn 是 独立 同 分 布 的 随机 变量 , 上 且 等 可 能 地 取 值 +1 和 
-1. 试 对 2 计算 Y2: (a) 当 N 是 一 个 固定 数 a; (b) 当 N 是 服从 均值 为 a 的 泊 松 分 布 . 

27. 设 有 无 限 多 数目 的 镶 , 我 们 独立 地 往 铅 里 抛 球 , 使 得 任 一 球 落 在 第 上 个 铅 里 的 概率 
是 1/2*,k = 1,2,3,…. 对 每 个 正 整数 N, 令 Zw 表示 在 第 N 次 抛 球 之 后 至 少 含有 一 个 球 | 42 | 


的 卵 的 数目 . 试 证 明 
OO 1 N 
E(Zn)=»》 |1- [1-=) |,， 
co 二 (| 


并 且 存 在 常数 Cl > 0 和 Ca > 0, 使 得 对 于 所 有 的 N， 
CilnN < E(ZNn) < ColnN 


提示 : 验证 并 利用 以 下 事实 : 


28. 设 工 和 尽 是 随机 选择 的 区 间 端 点 ， 且 具有 任意 的 联合 分 布 , 但 应 满足 (这 是 自然 
的 )L < R. 令 p(z) = Pr{L < xz < R} 是 区 间 履 盖 点 z 的 概率 , X = 已 一 工 是 区 间 长 度 , 试 
证 公式 EE[X] -| p(x)dz. 


29. 设 N 个 球 独立 向 n 个 色 抛 撕 , 每 个 球 落 入 任 一 氏 的 概率 均 为 二 . 令 Zw. 表示 全 
部 抛 境 之 后 空 饶 的 数目 ， 二 Pnn(k)=Pr(ZN,n =k) 定义 PN,n (£2)= > Pnn(k)e™. 
k=0 
(a) 证 明 


k 上 Kk 二 +1 
Pn+in(k) 一 € 一 2 PN n(k) 十 Pon( 十 1), 对 于 大 -一 0, l, “人 
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(b) 证 明 
Pn n(k) 一 一 : PNn- 1(k 一 1) 十 > 人 J ( ;) PN -in-_1(k). 
(c) 定义 Gn(t -> PNn(t): a 利用 (b), 证 明 Gn(t,z) = Gn_1(t,z)(e'!+e’—1)， 
从 而 推出 


Cn (tt z) = (e” +e 1), n=0,1,2,..: 


附 1 


关于 概率 论 及 其 应 用 方面 丰富 多 彩 的 介绍 见 Feller[1]. 但 Feller 的 书局 限于 讨 
论 离散 概率 . 

Gnedenko 的 教科 书 [2] 也 是 一 本 优秀 的 入 门 书 . 

男 一 本 有 益 的 初级 教科 书 是 Parzen 的 [3]. 

关于 随机 过 程 的 经 典 著 作 是 Doob 的 团 . 该 书 对 人 研究 随机 过 程 是 必 不 可 少 的 . 

另 一 本 关于 随机 过 程 构造 的 杰出 的 书 是 Dynkin [5] 的 最 近 翻 译本 . 


参考 书目 


[1l| W. Feller, An Introduction to Probability Theory and [ts Applications, Vol 1, 2nd ed. 
Wiley, New York, 1957. (有 中 译本 《概率 论 及 其 应 用 (第 3 版 )》, 胡 迪 和 鹊 译 ,人 民 邮 电 
出 版 社 出 版 .) 


[12] B. V. Gnedenko，Theory of Probability,，Chelsea, New York, 1962，( 有 中 译本 , 丁 寿 仁 


译 , 1954 年 第 2 版 ). 
[3 E. Parzen, Modern Probability Theory and Its Applications. Wiley, New York, 1960. 
[4] J. L. Doob, Stochastic Processes. Wiley, New York, 1953. 
[5} E. B. Dynkin, Theory of Markov Processes, Academic Press, New York, 1965. 
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第 2 章 ”马尔 可 夫 链 


这 一 章 介 绍 马尔 可 夫 链 , 其 内 容 可 在 任何 一 本 随机 过 程 初级 教程 中 找到 . 本章 
自 先 复习 马尔 可 夫 链 的 精确 定义 (读者 可 参阅 1.3 节 中 的 例 (c)). 

读者 可 尝试 构造 例子 解释 2.4 节 提 到 的 可 达到 、 互 通 、 非 周期 、 常 返 、 瞬 态 和 
不 可 约 等 概念 . 

2.7 节 仅 有 一 页 , 初次 阅读 可 略 过 . 


2.1 定 X 


离散 时 间 马 尔 可 夫 链 {Xn} 是 状态 空间 可 数 或 有 限 且 了 = (0,1,2,:… 
可 去 随机 过 程 . 我 们 可 以 把 XX 的 值 看 作 第 ”次 试验 的 结果 . 
为 了 方便 , 通常 用 非 负 整数 集 {0, 1,2,….} 标记 这 个 过 程 的 状态 空间 . 当 XX =i 
时 , 习惯 上 就 称 X 处 于 状态 1. 
已 知 X 为 状态 i, Xn+1 到 达 状 态 7 的 概率 ( 称 为 单 步 转移 概率 ), 用 P%"* 来 
表示 , 即 


) 的 马尔 


Po = Pr{Xnti = j|X, = (1.1) 


上 述 记 号 强调 , 一 般 地 , 转移 概率 不 仅仅 是 初始 状态 和 最 后 状态 的 函数 , 而 且 也 是 转 
换 时 间 的 函数 , 者 单 步 转移 概率 与 时 间 ( 即 n) 无 关 , 则 我 们 称 马尔 可 夫 过 程 具 有 平 
稳 转 移 概 率 ( 见 1.3 节 末 ). 由 于 所 遇见 的 马尔 可 夫 链 大 部 分 具有 平稳 转移 概率 , 所 以 
我 们 主要 讨论 这 种 情形 . 

在 这 种 情况 下 ， Po = PP; 是 与 n 无 关 的 , 已 ; 表示 在 一 次 试验 中 状态 从 i 转 
移 到 7 的 概率 . 习惯 上 , 我 们 把 B; 列 成 如 下 无 限 方 阵 的 形式 


Foo Po Po Pa … 
Pio Pi Ps Pas ::: 
Fo Pa Po Pa 1:- 


Fo P11 Po Psa .::: 


并 称 P= 1; 上 为 这 个 过 程 的 马尔 可 夫 和 矩阵 或 转移 概率 算 阵 . 
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矩阵 P 的 第 ;+1 行 是 在 已 知 X = i 的 条 件 下 Xnti 的 概率 分 布 . 在 状态 经 
间 状 态 数 目 是 有 限 的 , 则 P 是 有 限 方 阵 且 它 的 阶 等 于 状态 的 个 数 . 显然 ,PP; 满足 
条 件 


Pj;>0, 了 =012….， (1.2) 
Y_Pjy=1, i=0,1,2,.…. (1.3) 
7=0 


条 件 (1.3) 仅仅 表示 在 每 次 试验 中 必定 会 出 现 某 个 转移 . (为 方便 起 见 , 即使 经 过 一 
次 试验 之 后 状态 保持 不 变 , 我 们 仍然 说 发 生 了 一 次 转移 )， 


一 且 (1.1) 和 Xo 的 值 (或 者 更 一 般 地 说 , Xo 的 分 布 ) 被 指定 , 过 程 就 被 完全 确 
定 . 下 面 我 们 来 证 明 这 个 事实 . 


设 Pr{Xo = 外 = 只 要 指出 如 何 计算 概率 
Pr{Xo = io, X1 二 111, 不» = i2, ,Xn = in}, (1.4) 
即 可 , 依照 全 概率 公理 可 知 , 涉及 Xi Xi ,Xi 及 < j2 < … < jr 的 任何 概率 


都 是 形 如 式 (1.4) 的 各 项 之 和 | 
由 条 件 概率 定义 , 我 们 得 到 


Pr{ Xo 一 10, 从 1 一 11) 从 2 一 22， 人 nm 一 in} 
一 Pr{ Xn 一 in| Xo 一 210， 六 1 一 tl, , 及] 一 in—1}- 


Pr{ Xo = io, Xi = Xn = in1}. (1.5) 
现在 根据 马尔 可 夫 过 程 的 定义 ， 
Pr{ Xn = in|Xo = io, Xi = 7), Xn_1 = in_1)} 
= Pr{X, =in|Xn 1 = in1)} = Phi (1.6) 
把 式 (1.6) 代入 式 (1.5) 得 


Pr{ Xo 一 20; XI 二 ) 及 nm 一 in} 
—— ini,in Pr{Xo 一 210) 入 1 一 ?1 ,人 ni 一 in—1}. (1.7) 
由 归纳 法 , 式 (1.4) 变 为 


Pr{Xo 一 10) 从 1 一 21， 3 及 mn 一 in} 
in—lstin Fi _2in-1 四 oa Fi,. (1.8) 


2.2 马尔 可 夫 链 的 例子 39 


2.2 马尔 可 夫 链 的 例子 

马尔 可 夫 链 的 重要 性 在 于 有 大 量 物理 、 生 物 和 经 济 现象 可 以 用 它 来 描述 . 下 面 
我 们 路 举 数 例 . 
A. 室 间 齐 次 马尔 可 夫 链 
。 设 《 表示 仅 取 非 负 整 数值 的 离散 什 随 机 度量 , Prfe = 引 = ora > 0, 并 且 
2》 ui=1 设 后 ,6 表示 对 的 一 系列 独立 观察 
下面 我 们 描述 与 (i = 1 2,….) 相 联系 的 两 个 不 同 的 马尔 可 夫 链 

在 每 一 种 情况 下 , 其 状态 空间 都 是 非 负 整数 集合 . 


0) 考虑 过 程 Xn,n = 0 1 2 …… 定义 Xn = 如 (Xo = &o 事先 指定 ). 它 的 马尔 可 
夫 窍 阵 有 如 下 形式 


U0 U1 U2 43 ‘i 
CO Ul 4d2 4d3 «i 


U0 Cl QQ2 3 1: 


息 阵 的 各 行 对 应 值 恒 等 表明 随机 变量 X41 与 X% 是 独立 的 . 
(i) 另 一 类 重要 的 马尔 可 夫 链 源 于 对 &; 的 部 分 和 序列 加 的 考虑 , 即 


加 pn 一 8 十 6 十 十 Sn 有 二 12 


且 定 义 mo =0. 显而易见 过 程 Xn = mw 是 马尔 可 夫 链 . 我 们 容易 计算 它 的 转移 概率 
您 阵 为 


Pr{Xnt+1 = j|Xn, = 让 
= Pr{ti+é62++énti= jt1+é++bn = = Pr{énti=7 一 个 
| Qj-it 对 于 j 之 
0， 对 7 < 1 
这 里 我 们 利用 了 &; 的 独立 性 假设 . 
写成 窍 阵 形式 为 


CO Ql U2 U3 Qua4 ‘£‘*: 
0 ao al QQ Q3 :… 


=o 0 ao a …| (2.1) 
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如 果 随 机 变量 & 允许 取 正 整数 和 负 整 数 , 则 wm 可 能 取 遍 全 体 整 数 . 取代 用 非 负 
整数 集 代表 状态 空间 的 惯常 方法 , 这 时 用 整数 全 体 代表 状态 空间 会 更 方便 些 , 因为 这 
样 其 概率 转移 窍 阵 将 呈现 更 加 对 称 的 形式 . 于 是 状态 空间 由 数 …, 一 2, 一 1,0, 1,2,…: 
组 成 , 其 转移 概率 官 阵 为 


* Ql wD Ql C2 U3 i:: 
P=|... ao2 a oo mo … 


GQ3 Qo2 Ql QO0 Ul 1':: 


十 co 
这 里 ， Pr{€ = k} = ak,k = 0,+l1,+2,..., HL ax 之 0， 2, Qk 三 上 


天 一 一 Co 


B. 一 维 随机 游 动 


在 讨论 随机 游 动 时 , 可 把 系统 的 状态 直观 地 看 作 是 一 个 移动 粒子 的 位 置 . 

一 维 随机 游 动 是 这 样 一 类 马尔 可 夫 链 , 其 状态 空间 为 整数 集 的 有 限 或 无 限 子 
集 : a,a + 1,.…,b, 如 果 某 个 粒子 处 于 状态 i, 则 通过 一 次 转移 它 或 者 仍 停留 在 i, 或 
者 移动 到 相 邻 状态 i 一 1,i+1 其 中 之 一 . 如 果 状 态 空 间 是 非 负 整数 集 , 则 一 个 随机 游 
动 的 转移 矩阵 有 如 下 形式 


70 Do 0 0 
qi 71 D1 0 
0 gg r2 pa ££ 
pp 一 ， 3 (2.2) 


其 中 pi > 0,g > 0,7i 之 0, 并 且 gi+Ti+pi = 1,1= 1,2,.……(i > 1),po > 0,70 > 
0,7ro 十 po = 1 特别 地 , 如 果 Xn = i, 则 对 于 i>1 
Pr{Xnt1i=i+lXn = =p, Pr{Xnti =i—1|X,=i}= gq 
Pr{Xn+1 = iXn = 1} =n, 
当 ; 二 0 时, 上面 第 一 、 三 等 式 仍 成 立 . 


名 称 “ 随 机 游 动 ”似乎 是 恰当 的 , 因为 这 个 过 程 的 一 个 直 现 描述 是 一 个 人 (如 
酬 汉 ) 随机 地 疝 前 或 向 后 移动 一 步 . 
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赌 徒 在 一 系列 比赛 中 财富 的 变化 通常 用 随机 游 动 来 描述 ， 明确 地 说 , 假设 一 个 
拥有 财富 的 赌 徒 A 和 一 个 拥有 无 限 财 富 的 赌 徒 进行 赌博 , 赌 徒 A 在 每 一 次 比赛 
中 顾 得 一 个 单位 财富 的 概率 为 pk, 输 一 个 单位 的 概率 为 gc = 1 一 px, (k > 1), (每 次 
比赛 的 选择 可 取决 于 他 们 的 财富 ), 且 设 ro = 1. 以 Xn 表示 经 过 次 比赛 之 后 赌 徒 
A 的 财富 , 过 程 {Xn} 显然 是 一 个 随机 游 动 . 注意 , 一 旦 达到 状态 0( 即 赌 徒 A 输 光 )， 
则 过 程 将 一 直 停 留 在 这 个 状态 . 这 个 过 程 通常 也 称 为 “ 赌 徒 输 光 ”模型 . 

村 对 所 有 上 之 1,pk 一 p,gk 二 1 一 p= 二 q, 且 ro==1, 铬 p>g 则 此 随机 洲 动 描述 
在 每 次 比赛 中 都 有 利于 赌 徒 A 的 情形 . 在 第 3 章 我 们 将 证 明 赌 徒 A 最 终 破 产 (他 
输 掉 全 部 财富 ) 的 概率 为 (go/p)z", 其 中 zo 表示 在 初始 时 刻 0 所 拥有 的 财富 , 而 他 的 
财富 无 限 增加 的 概率 是 1 - (gq/p)”?. 车 p < g, 这 时 每 次 比赛 有 利于 其 对 手 , 赌 徒 A 
如 果 坚持 财 下 去 , 则 以 概率 1 最 终 输 光 . 即使 每 次 赔 博 都 是 公平 的 , 即 pe = qx = >， 
结果 也 是 一 样 的 , 即 赌 徒 A 必定 最 终 破 产 . 

如 果 对 手 , 即 赌 徒 B, 起 先 也 只 有 有 限 的 财富 y, 而 赌 徒 A 拥有 初始 财富 z( 设 
rz 十 y= 0), 则 我 们 现在 重新 考虑 马尔 可 夫 链 {X%}, 这 里 X 仍 表 示 第 n 次 比赛 后 
赌 什 A 的 财富 . 然而 现在 过 程 的 状态 局 限于 值 0,12,……,a.a 一 XX 表示 第 m” 次 比 
赛 后 赌 徒 B 的 财富 . 若 在 二 次 比赛 中 允许 平局 发 生 , 则 该 过 程 的 转移 概率 矩阵 为 


1} 0 0 0 


da-li Ta-l Pa-l 
0 ... 0 0 1 


其 中 pi(g) = 1,2,…,a 一 1, 表示 当 赌 徒 A 的 财富 为 i 时 接 下 来 再 增加 (减少 ) 一 
个 单位 财富 的 概率 , 而 7; 可 以 解释 为 发 生平 局 的 概率 . 注意 , 由 (2.3) 给 出 的 马尔 可 
夫 链 , 当 赔 徒 A 的 财富 (或 过 程 的 状态 ) 达到 0 或 a 时 , 以 后 就 永远 停留 在 此 状态 . 
当 过 程 到 达 状 态 0 时 , 我 们 说 赌 徒 A 输 光 了 ; 而 当 过 程 到 达 状 态 a 时 , 我 们 说 赌 徒 
B 输 滤 了 . 

随机 游 动 不 仅 用 来 模拟 赌博 模型 , 而 且 常 用 来 离散 通 近 描述 扩散 粒子 运动 的 物 
理 过 程 . 如 果 一 个 粒子 受到 碰撞 或 随机 脉冲 , 它 的 位 置 是 随机 地 移动 的 , 尽管 粒子 运 
动 描述 的 是 一 连续 轨道 . 如 果 粒 子 将 来 的 位 置 ( 即 它 的 概率 分 布 ) 仅仅 取决 于 它 现 
在 的 位 置 , 春 以 Xi 表示 时 刻 t 的 位 置 , 则 过 程 {X:} 是 一 个 马尔 可 夫 过 程 . 此 连续 
运动 的 一 个 离散 通 近 对 应 着 一 个 随机 游 动 . 布朗 运动 ( 见 1.2 节 ) 的 古典 离散 形式 
是 一 个 对 称 随机 游 动 . 整数 集 上 对 称 随 机 游 动 是 这 样 一 个 马尔 可 夫 链 , 它 的 状态 空 
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间 是 整数 全 体 , 转移 概率 赴 阵 的 元 素 为 


p， 若 j=i 二 1， 
Dp; 在 了 7 =: 一 1 ， ， 
PP; = ， 二 了 0, 土 1, 土 2,.…， 
. 7 在 7 一? 
0， 其他. 
、 _ 1 
其 中 p> 0r> 0, 且 2p+7=1. 以 下 我 们 约定 “对 称 随机 游 动 ” 专 指 7 = 0,p= 5 


的 情况 . 

为 了 考虑 某 种 物理 模型 , 我 们 需 研 究 在 非 负 整 数 集 上 的 随机 游 动 . 根据 零 状态 
的 性 质 我 们 对 不 同 的 过 程 进行 分 类 . 我 们 把 注意 力 集中 在 由 (2.2) 所 描述 的 随机 游 
动 上 . 寿 po = 1, 则 ro = 0. 这 时 等 状态 好 像 一 个 反射 壁 . 不 管 粒子 什么 时 刻 到 达 零 
状态 , 下 一 次 转移 必定 回 到 状态 1. 这 对 应 的 物理 过 程 相当 于 在 零点 存在 一 个 弹性 
壁 , 粒子 遇 到 弹性 壁 就 无 后 效 地 反 跳 回来 . 

若 po=0 且 7o= 卫 则 零 相 当 于 一 个 吸收 壁 , 一 旦 粒子 到 达 零 , 它 就 永远 留 在 
那里 . 若 po > 0 且 ro > 0, 则 零 是 一 个 部 分 反射 壁 . 

者 随机 游 动 限 制 在 有 限 个 状态 9, 譬如 0,1,2,…,a, 则 状态 0 和 a 都 可 以 独立 
地 或 以 任何 组 合 方式 成 为 反射 壁 、 吸 收 壁 或 部 分 反射 壁 . 我 们 已 经 遇 到 一 个 限制 在 
状态 5 的 随机 游 动 的 模型 (例如 , 两 个 财产 有 限 的 赌 徒 输 光 模型 ), 其 中 0 和 a 都 是 
吸收 的 [ 见 (2.3)]. 

透 膜 扩散 的 古典 数学 模型 是 有 名 的 Ehrenfest 模型 , 即 边 界 状态 为 反射 壁 的 有 限 
状态 集 上 的 随机 游 动 . 此 随机 游 动 的 状态 空间 记 为 i = ~a, 一 a 二 1,……, 一 1,0,1,…,@,， 


其 转移 概率 矩阵 元 素 为 
pk 如 果 了 = 外 + 1 
Pi = 1 号 一， 如 果 了 = 一 1 
0， ”其 他 


这 个 模型 的 物理 解释 如 下 . 想象 两 个 共 装 着 2a 个 球 的 容器 . 假设 第 一 个 容器 A 有 
k 个 球 , 第 二 个 容器 B 有 2a 一 上 个 球 . 从 2a 个 球 中 随机 地 挑选 1 个 球 (中 所 有 选择 
都 是 等 可 能 的 ) 放 到 另 一 个 容器 . 每 一 次 挑选 都 使 过 程 发 生 一 次 转移 . 易 见 , 这 些 球 
是 在 两 个 容 融 之 间 波 动 , 大 体 上 是 从 装 有 较 多 球 的 容器 移动 到 装 有 较 少 球 的 容器 . 
一 个 物理 系统 , 大 主要 由 正比 于 到 达 平 衡 状态 的 距离 的 恢复 力 所 控制 时 , 往往 可 以 
用 Ehrenfest 模型 来 近似 . 
古典 的 n 维 对 称 随机 游 动 可 以 用 下 述 方法 描述 . 状态 空间 是 ” 维 欧 氏 空间 E" 
的 所 有 整数 格 点 , 即 一 个 状态 是 由 形 如 此 = (i, kz,… ,kn) 的 一 个 nn 元 整数 组 表示 . 
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其 转移 概率 矩阵 的 元 紊 为 


1 n 
my 若 [i 一 上 | 一 二 
0， 其 他 . 


类 似 于 一 维 情况 , E” 上 的 对 称 随机 游 动 表示 n 维 布朗 运动 的 一 种 离散 形式 . 
C. 离散 排队 马尔 可 夫 链 


顾客 到 达 服 务 台 并 排 成 队 , 在 每 一 段 时 间 只 有 一 个 顾客 受到 服务 假定 此 时 至 少 
有 一 个 顾客 出 现 . 如 果 没 有 顾客 等 候 , 则 在 这 段 时 间 就 没有 人 接受 服务 ，( 例 如 , 我 们 
可 想象 一 个 出 租 汽车 站 , 在 每 个 固定 的 时 间 段 有 一 辆 出 租 汽 车 到 达 并 服务 顾客 , 寿 
无 人 候车 则 出 租 汽 车 立即 开 走 .) 在 每 一 段 服务 时 间 内 新 顾客 都 有 可 能 到 达 . 我 们 
假设 在 第 n 段 时 间 内 实际 到 达 的 顾客 数 是 一 随机 变量 如 , 它 的 分 布 函数 与 时 间 段 
无 关 , 并 由 下 式 给 出 : 
Pr{ 在 一 段 服务 时 间 内 有 位 顾客 到 达 } 


= pr{é, =k} = apk = 0,1,..., (2.4) 


0 0 是 yw =1 


大 一 0 


我 们 还 假设 随机 变量 序列 &， 是 独立 的 . 在 每 段 时 间 的 开始 系统 的 状态 由 排队 等 候 
服务 的 顾客 数目 确定 . 如 果 现 在 的 状态 是 i, 那么 经 过 这 一 段 时 间 之 后 , 状态 变 为 


3 如 采 i = 0， 


这 里 《 是 在 这 一 段 时 间 内 到 达 的 新 顾客 数 , 而 在 这 段 时 间 内 只 有 一 个 顾客 得 到 服 
务 . 从 随机 过 程 的 角度 , 式 (2.5) 可 表达 为 


Xn+i = (Xn — 1)t +é&,, (2.6) 


这 里 , Y” = max(Y,0). 据 式 (2.4) 和 式 (2.5), 经 过 简单 的 计算 , 其 转移 概率 矩阵 为 


(2.5) 


Qn 0 QW 63 U4 |*: 
a0 CI CI G3 QQ4 ‘I: 


p C0 dr C2 da3 1£:: 2 7 
Pl = 0 0 ao U1 U2 (2.7) 


0 QA0 Ql I{: 
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显然 , 如 果 在 一 段 服务 时 间 内 到 达 的 新 顾客 数 日 的 期 望 值 》、 ka 超过 1, 则 排队 队 
列 长 度 随 着 时 间 推移 将 无 限 拉 长 

另 一 方面 , 如 果 》 ka < 1 则 我 们 将 看 到 排队 长 度 接近 一 个 平衡 状态 (稳定 
状态 ) 如 果 3- ka = 1 则 总 体 上 是 不 稳定 的 . 这 些 搬 述 在 我 们 建立 了 相关 的 常 反 
理论 ( 见 3.5 节 ) 之 后 会 得 到 详尽 说 明 


D. 存储 模型 


考虑 商业 上 为 了 满足 市 场 持续 的 需求 而 要 在 仓库 准备 一 定 的 存货 的 情形 . 我 们 
假设 货物 的 补充 是 发 生 在 连续 时 刻 t,t2,…, 并 假设 在 时 间 (tn-_1,tn) 的 货物 的 累 
计 和 需求 量 是 一 随机 变量 &，, 其 分 布 卫 数 与 各 段 时 间 无 关 : 


Pr{én =k}=ar, k=0,1,2,..., (2.8) 


这 里 ok > 0 且 》 ak = 1 在 每 段 时 间 之 初 清点 存货 ， 存储 策 略 由 两 个 事先 指定 的 


k=0 
非 负 临界 值 s 和 5 > s 来 确定 . 其 具体 执行 办 法 如 下 : 倘若 可 用 的 存货 不 超过 s, 则 
马上 进货 以 使 现 有 存量 达到 S. 要 是 可 用 存货 已 超过 s, 则 不 马上 进货 . 设 Xn 表示 
恰好 在 时 刻 如 进货 前 的 现 有 存储 量 . 过 程 {X} 的 状态 由 所 有 可 能 存储 值 组 成 : 


5,5 一 1 十 1 0, 一 1 一 2 


其 中 , 负 值 可 理解 为 超出 库存 的 需求 量 , 因而 需 在 再 进货 时 直接 供应 . 依照 存储 原 
则 , 相 邻 两 个 时 间 段 的 存储 量 有 如 下 关系 : 


Xn — én+1， 大 s < Xn < 5, 
ntl 一 (2.9) 


S 一 Entl, 大 Xn < $， 


这 里 & 是 在 第 n 段 时 间 里 的 需求 量 , 由 分 布 律 式 (2.8) 确定 . 如 果 我 们 假设 上 是 
相互 独立 的 , 那么 存货 量 Xo, X1, X2,.… 显然 构成 一 个 马尔 可 夫 链 , 其 转移 概率 矩阵 
可 以 由 关系 式 (2.9) 计算 得 到 . 


E. 成 功 的 游程 
考虑 非 负 整 数 集 上 的 一 个 马尔 可 夫 链 , 其 转移 概率 矩阵 为 
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< 


po go 0 


3 
jo 
Cy ; 
Ne 
bE 
《一 


IB;l = ?2 0 0 ga | (2.10) 


全 
二 
二 
一 


其 中 , gq; > 0,pi > 0, 且 gi 十 pi = 1,i = 0,1,2,…. 这 里 等 状态 起 着 特别 的 作用 , 它 可 
以 从 其 他 状态 通过 一 次 转移 达到 , 而 状态 i 十 1 只 能 由 状态 i 转移 达到 

这 个 例子 便于 计算 , 因此 我 们 将 经 常 利 用 它 解释 一 些 概念 和 结果 . 

这 个 转移 短 阵 的 一 个 特例 是 处 理 所 谓 “成 功 游 程 ” 问题 得 到 的 . 考虑 一 系列 重 
复试 验 , 每 次 试验 只 有 两 种 结果 : 成 功 (5) 和 失败 (FF). 并 具体 地 说 , 考虑 只 有 两 个 
结果 (5 或 F) 的 一 系列 试验 , 且 假 设 在 每 一 次 试验 中 成 功 (5) 的 概率 为 a, 而 失败 
() 的 概率 为 6 = 1 一 a. 如 果 到 第 nn 个 试验 时 , 前 7 二 1 次 试验 ( 含 第 nn 次 ) 的 试验 结 
果 分 别 为 5S,S,… ,5S, 则 我 们 说 在 第 n 次 试验 出 现 了 一 个 长 度 为 7 的 成 功 游 程 . 现 
在 我 们 把 当前 出 现 的 成 功 浒 程 的 长 度 看 作 过 程 的 当前 状态 . 特别 地 , 如 果 最 后 一 次 
试验 的 结果 是 失败 的 , 则 状态 是 零 . 当 最 后 7 十 1 次 试验 的 结果 依次 为 F 5, 5,:…, 5， 
则 过 程 的 状态 变量 将 记 为 "~ 显然 该 过 程 是 马尔 可 夫 过 程 (因为 各 次 试验 是 彼此 独 
立 的 ), 并 且 其 转移 定 阵 的 形式 为 式 (2.10), 其 中 pn = Bb,n = 0,1,2,….. 

F. 分支 过 程 
假定 某 生物 体 在 其 生命 终结 之 际 繁 殖 的 后 代数 6 是 一 随机 变量 , 其 概率 分 布 为 


PrfE = k}=ar, k=0,1,2,..., (2.11) 


其 中 , ok > 0, 》 ak = 1. 我 们 假设 所 有 这 些 后 代 的 行动 互相 独立 , 且 在 它们 生命 的 


k=0Q 
最 后 按照 概率 分 布 式 (2.11) 各 日 繁殖 后 代 [为 简单 起 见 , 假定 它们 的 寿命 是 相同 的 ]， 
这 样 一 代 一 代 繁 殖 下 去 . 看 X 表示 第 n 代 的 总 数 , 则 过 程 {Xn} 是 一 个 马尔 可 夫 
链 . 
测 实 上 ， 由 于 后 代 的 数目 仅 是 现 有 生物 总 数 的 东 数 ， 因而 关于 从 ni 从 na ”3 
Xn ApT <n < <nNnr<n 的 分 布 仅 依赖 于 最 后 所 知道 的 生物 总 数 . 显然 
转移 矩阵 的 元 素 由 下 式 所 给 定 : 


Pi; = Pr{Xnti = Jj|Xn = = Priti+62+ + 二 = 让) (2.12) 
这 里 &(i = 1,2,.…) 是 对 由 分 布 律 式 (2.11) 确定 的 随机 变量 的 一 次 独立 观测 . 公式 


(2.12) 可 以 简明 地 解释 如 下 . 第 n 代 的 i 个 生物 体 各 目 独 立 繁 殖 它 们 后 代 的 数目 分 


别 为 &1,&2, “0 , &i, 因此 它们 繁殖 后 代 的 累计 数 是 81 十 82 十 :十 6 
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如 果 应 用 母 函 数 , 显然 6 + &2 十 … 十 & 的 母 隙 数 是 [g(s)]', 这 里 9 是 对 应 于 
的 母 函数 (我们 使 用 了 独立 随机 变量 和 与 母 函数 复合 的 性 质 , 见 1.1 节 . ) 因此 Pi; 
就 是 [9(s)]' 展 成 笑 级 数 的 第 了 个 系数 . 


G. 遗传 学 中 的 马尔 可 夫 链 


下 面 理 想 化 的 遗传 学 模型 是 由 S.Wright 在 研究 基因 频率 受 变异 与 选择 影响 而 
出 现 的 波动 现象 时 提出 的 . 我 们 首先 来 描述 所 谓 单 倍 体 的 随机 繁殖 模型 ， 暂 时 不 考 
虑 变异 现象 和 选择 作用 , 假设 我 们 涉及 的 群体 由 总 数 为 2N 的 a 型 和 4 型 基因 构 
成 . 则 下 一 代 的 组 成 取决 于 如 下 2N 个 独立 二 项 试验 : 如 果 原 来 群体 由 了 个 a 型 基 
因 和 2N -了 个 4 型 基因 组 成 , 则 每 次 试验 结果 为 a 型 或 4 型 的 概率 分 别 为 
了 1 也 
-2N’ $7 2N 
如 此 重复 地 选择 . 依照 这 样 的 程序 , 我 们 产生 了 一 个 马尔 可 夫 链 {Xn}, 其 中 Xn 是 
在 第 n 代 元 素 个 数 恒 为 2N 的 群体 当中 a 型 基因 的 数目 . 状态 空间 含有 2N 十 1 个 
值 {0,1,2,…,2N}, 转移 概率 矩阵 依照 二 项 分 布 来 计算 


Dp; 


. 2N kp). 
Pr{Xn+1 = kXn = fj} = Pk = | ) pg? (jk=0,1,...,2N). (2.13) 


关于 上 述 生 物 学 原理 方面 的 论述 , 请 读者 参阅 Fisher 的 书 . 

注意 , 状态 0 和 2N 是 完全 吸收 的 , 即 当 XX,，= 0( 或 2N) 时 则 对 所 有 有 > 
0, Xi = 0( 或 2N). 一 个 有 趣 的 问题 是 确定 在 条 件 Xo = i 之 下 群体 达到 “稳定 ”， 
即 此 群体 纯粹 由 a 型 基因 或 4 型 基因 组 成 的 概率 . 与 此 有 关 的 是 确定 趋 近 于 这 个 
“固定 ”的 速率 . 我 们 将 在 第 3 章 关 于 吸收 概率 的 一 般 分 析 中 , 研究 这 样 的 问题 . 

一 个 比较 实际 的 模型 是 考虑 变异 过 程 . 我 们 假设 在 新 一 代 形 成 之 前 , 每 个 基因 
有 可 能 变异 , 即 变 成 另 一 种 类 型 的 基因 . 特别 地 , 我 们 假设 每 个 基因 变异 a 一 4 出 
现 的 概率 为 ai, 变异 4 一 a 出 现 的 概率 为 az. 再 者 , 我 们 假设 下 一 代 的 组 成 是 由 
2N 个 独立 二 项 试验 确定 . 当 母 体 群 体 由 了 个 a 型 基因 组 成 时 , 二 项 试验 的 p; 和 g; 
的 值 取 为 


pj 一 (1 一 G1L) 十 ( 一 坟 Q2, 


di 一 30 十 ( 一 贡 (1 — a2). 


其 理由 如 下 : 我 们 假设 变异 现象 先 发 生 , 然后 新 的 基因 由 群体 中 随机 选择 确定 . 这 


1. R. A. Fisher, The Genetical Theory of Natural Selection, Oxford(Clarendon) Press, London 
and New York, 1962. 


(2.14) 
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料 , 在 变异 已 经 发 生 之 后 选择 一 个 a 型 基因 的 概率 恰好 是 当前 a 型 基因 数目 的 7 


因此 平均 概率 (关于 可 能 的 变异 求 平均 ) 显然 是 变异 之 后 a 型 基因 平均 概率 的 7 

但 是 这 个 平均 数 正 是 j(1 一 ai) 十 (2N 一 了 ao, 这 就 导出 了 式 (2.14). 
与 马尔 可 夫 链 相 联系 的 转移 概率 由 (2.14) 所 给 出 的 pj,q; 值 以 及 式 (2.13) 来 

计算 
若 alias > 0,“ 稳 定 ” 在 任何 状态 都 不 会 出 现 . 当 n 一 oo 时 , Xn 的 分 布 函数 将 


k=0 


1 > 0) e 的 分 布 函 数 称 为 稳 态 基因 频率 分 布 


现在 我 们 回头 讨论 简单 随机 配对 模型 并 讨论 有 利于 某 基 因 (例如 a 型 基因 ) 的 
选择 作用 概率 . 假设 我 们 希望 加 强 a 型 基因 的 选择 优势 , 使 后 代 的 相对 数量 的 期 户 
比例 数 分 别 为 1 十 s 和 1, 这 里 s 是 较 小 的 正 数 . 我 们 用 


(1 十 3)7 
一 ,=]1—p; 
Nts 和 Pj 


bi 


代替 原来 的 p; = j/2N 和 qj = 1 j/2N. 然后 像 前 面 一 样 通过 二 项 抽样 确定 下 一 
代 基 因 . 如 果 母 体 群体 由 了 个 a 型 基因 组 成 , 则 下 一 代 a 型 基因 和 4 型 基因 的 期 望 
数 分 别 是 1 

1 十 3)7 2 人 一 7? 
oN 7s; 和 2 5 


第 n+1 代 a 型 基因 和 4 型 基因 的 期 望 数 的 比 古 


1+s 7 了 _ 1+s 第 n 代 中 4& 型 基因 的 数目 
1 2N-j; 1 第 ? 代 中 4 型 基因 的 数目 


由 此 说 明了 选择 性 的 意义 . 
H. 遗传 模型 I 


基因 表现 为 若干 亚 单 位 的 组 合 , 为 确定 起 见 , 假设 由 N 个 亚 单位 组 成 , 当 含 有 
基因 的 细胞 即将 分 裂 时 , 每 个 亚 单位 也 分 成 两 个 , 两 个 细胞 都 接受 了 和 前 面相 同 数 
目 亚 单位 构成 的 基因 . 有 一 些 亚 单位 可 能 处 于 变异 的 状态 . 我 们 假定 分 裂 时 变异 的 
单位 产生 变异 的 单位 而 非 变异 单位 产生 非 变异 单位 . 再 者 , 两 个 新 基因 间 亚 单位 的 
分 配 是 随机 的 , 就 像 从 一 个 铅 中 随机 抽取 这 些 单位 . 我 们 只 要 跟踪 遗传 的 一 个 单 文 
而 不 必 注 意 全 部 的 繁殖 情况 . 为 了 描述 某 条 单 支 的 历史 , 我 们 考虑 一 个 马尔 可 夫 链 ， 
它 的 状态 空间 为 {0,1,2,…,N}. 称 一 个 基因 处 于 状态 i, 如 果 它 由 i 个 变异 亚 单位 


2N . 
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入 一 i 个 正常 亚 单位 构成 . 转移 概率 由 下 式 计 算 : 


m= (2 ) (mR )/() (2.18) 
j Nj; N 


此 式 源 由 如 下 : 假定 母体 基因 处 于 状态 i, 分 裂 之 后 我 们 总 共 得 到 2 个 变异 单位 和 
2N 一 21 个 正常 单位 . 子 体 基 因 的 状态 由 从 这 2 个 单位 中 随机 挑 出 的 N 个 单位 构 
成 , 根据 超 几 何 概率 定律 , 子 体 基因 处 于 状态 7 的 概率 由 (2.15) 给 出 . 

状态 j= 1,2,.…,NN 一 1 称 为 混合 的 , 状态 0 和 NN 称 为 单纯 的 . 状态 N 很 有 趣 ， 
这 时 一 个 所 有 亚 单位 都 是 变异 的 基因 , 可 能 引起 该 基因 死亡 , 而 状态 0 说 明 这 种 类 
型 的 基因 将 不 再 发 生变 异 . 我 们 以 后 将 确定 基因 从 状态 i 出 发 , 最 终 停 留 于 状态 0 
和 N 的 具体 概率 . 


2.3 ”马尔 可 夫 链 的 转移 概率 和 矩 阵 


一 个 马尔 可 夫 链 完全 由 它 的 单 步 转移 概率 矩阵 及 在 0 时 刻 状态 概率 分 布 的 详 
细 描 述 所 确定 . 马尔 可 夫 链 的 研究 主要 涉及 过 程 可 能 实现 概率 的 计算 . 在 这 些 计算 
中 最 重要 的 是 n 步 转移 概率 矩阵 PW" = 上 P83. 这 里 P35 表示 过 程 经 过 n 步 转移 从 
状态 i 到 达 状 态 7 的 概率 , 即 


Pr = Pr{Xnim 王 省 Km 一 计 . (3.1) 


这 里 应 该 注意 , 我 们 暂时 仅 处 理 具 有 平稳 转移 概率 的 齐 次 过 程 , 否则 , (3.1) 的 左边 
还 取决 于 m. 
由 马尔 可 夫 假 设 知 , 我 们 可 用 一 步 转移 概率 矩阵 1 上 Pl 表达 (3.1) 定理 叙述 如 
下 . 
定理 3.1 如 果 一 个 马尔 可 夫 链 的 单 步 转移 概率 矩阵 是 P = 4B;|, 则 对 和 为 
n 的 任意 固定 非 负 整数 对 7,s 且 7 十 s=n， 


P= > PR PE， (3.2) 
k—0 
这 里 , 我 们 规定 
po_j) ‘= 
- 0， i 关 7 


由 矩阵 理论 , 我 们 可 看 到 关系 式 (3.2) 恰好 是 矩阵 乘积 公式 , 所 以 Pm = P"; 换 句 
话说 , PL 可 以 看 成 是 已 的 n 次 知 和 矩阵 P" 的 元 素 . 
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证 明 ”我 们 仅 证 明 ”= 2 的 情况 , 经 两 步 转移 , 从 状态 i 转移 到 状态 7 这 个 渤 
件 可 以 分 解 为 若干 事件 , 首先 从 状态 i 第 一 步 转移 到 中 间 状 态 k(k = 0,1,2,….), 然 
后 再 从 状态 上 第 二 步 转移 到 ;. 由 马尔 可 夫 假 设 , 第 二 步 转移 概率 为 Pj, 第 一 步 转 
移 概率 为 Px. 利用 全 概率 公式 即 导 出 式 (3.2). 一 般 情况 的 证 明 也 是 同样 的 .是 

如 有 果 过 程 初始 状态 为 ; 的 概率 是 p;, 即 Xo 的 分 布 律 是 Pr{Xo = jj} = pj, 那么 
在 时 刻 n 过 程 处 于 状态 & 的 概率 为 


pr = > pjPi = Pr{X, = k). (3.3) 
一 


除了 确定 过 程 的 联合 概率 分 布 外 , 一 个 比较 困难 但 却 是 有 趣 的 问题 是 研究 当 
n 一 00 时 P8 的 渐 近 性 质 . 我 们 可 以 期 望 初始 状态 的 影响 随 着 时 间 推 移 而 逐渐 减 
小 且 当 n 一 oo 时 , PR 趋 近 一 个 与 宇 无 关 的 极限 .为 了 准确 分 析 过 程 的 渐 近 性 质 ， 
我 们 需要 引入 一 些 关于 马尔 可 夫 状态 分 类 的 原则 
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状态 j 称 为 可 自 状态 i 到 达 的 , 如 果 对 某 个 整数 n > 0, Pr > 0, 即 状态 7 是 可 
日 状 态 i 到 达 的 , 如 果 从 状态 i 出 发 经 过 有 限 步 转移 到 达 状 态 j 的 概率 是 正 的 . 两 
个 状态 和 了 彼此 可 达 , 则 称 为 互通 的 , 并 记 为 i 一 j. 如 果 状 态 i 和 j 不 是 互通 的 ， 
则 关系 式 
Pj =0 对 所 有 n>>0 
和 
Pi 二 0 对 所 有 n 之 0 
至 少 成 立 一 个 . 互通 的 概念 是 一 等 价 关系 : 
(上) i 记 自 有 反 性 ), 这 可 由 定义 PP = 6i; = | 1 ey 直接 推 得 . 
让 者 i 一 jj, 则 7 一 纪 (对 称 性 ) 这 由 互通 的 定义 推 得 . 
(证 ) 者 ic 一 了 且 7 一 = 则 i 一 上 (传递 性 ). 
关于 传递 性 , 证 明 如 下 : i 一 7 和 7 一 上 北 含 着 存在 整数 n 和 m 使 得 Pr > 0 
和 Px > 0. 因此 由 式 (3.2) 和 每 个 Pi。 的 非 负 性 , 推 得 


Om 
Pe'™ = PIP > PPR >0. 


r 二 0 


类 似 可 证 , 存在 正 整 数 v 使 得 Pe, > 0 
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现在 我 们 可 把 过 程 状态 的 全 体 分 成 若干 个 等 价 类 . 在 同一 个 等 价 类 里 每 个 状态 
都 是 互通 的 . 可 能 会 出 现 从 某 一 类 出 发 以 正 概率 转移 到 另 一 类 , 但 相反 方向 的 转移 
就 不 可 能 了 , 否则 这 两 类 就 归并 成 一 个 等 价 类 我 们 称 马 尔 可 夫 链 是 不 可 约 的 , 如 
果 等 价 关系 只 约 化 出 一 个 类 , 即 一 个 过 程 是 不 可 约 的 , 如 果 所 有 状态 彼此 互通 . 
为 了 解释 这 个 概念 , 我 们 考虑 转移 概率 赴 阵 
1 1 


一 二 0 0 0 
2 2 : 
1 3 : 
4 4:09000 
de. P, 0 
Pp : 一 
0 0:0 1 0 0 厂 ， 
: 1 1 
9 
0 0i0 10 


这 里 Pl 是 矩阵 PP 前 两 行 和 前 两 列 交 叉 的 元 素 构 成 的 矩阵 , 官 阵 Ps 是 由 和 窍 阵 书 后 
三 行 三 列 交 叉 元 素 构成 的 . 这 个 马尔 可 夫 链 的 状态 显然 分 成 两 类 : {1,2} 和 {3,4,5}. 
如 果 Xo 的 状态 处 于 第 一 类 , 则 该 系统 的 状态 此 后 一 耳 停 留 在 这 一 类 中 , 其 相应 的 
转移 矩阵 是 Pi. 类 似 地 , 如 果 初 始 状态 属于 第 二 类 , 其 相应 的 转移 窍 阵 是 Po. 这 相 
当 于 我 们 把 两 个 完全 无 关 的 过 程 组 合 在 一 起 . 


在 随机 游 动 模型 中 , 知 其 转移 概率 抢 阵 为 


1 0 0 0 0 0 0 0 

IUD 0 0 0 1 

0 gg 0 pp 0 0 0 2 
P= | 

0 .i q 0 pl a—1 

0 0 0 1 a 


则 此 时 我 们 有 三 个 等 价 类 : {0}, {1,2,… ,a 一 1} 和 {a}. 这 个 例子 表明 可 以 从 第 一 
类 出 发 到 达 第 一 类 或 第 二 类 , 但 相 肥 方 疝 的 转移 是 不 可 能 的 . 

可 直接 验证 , 当 对 于 所 有 都 有 ak > 0 时 , 排队 马尔 可 夫 链 (2.2 市 例 C) 是 不 
可 约 的 . 在 相同 条 件 下 易 证 存储 模型 ( 例 D) 也 是 不 可 约 的 . 成 功 游 程 的 马尔 可 夫 链 
模型 ( 例 F) 在 条 件 q; > 0,p; > 0(i = 0,1,…) 下 同样 是 不 可 约 的 . 
与 尔 可 夫 链 的 周期 性 

对 于 某 个 i, 使 PR > 0 成 立 的 所 有 正 整 数 ”的 最 大 公约 数 (g.c.d.) 称 为 状态 5 
的 周期 , 记 为 d(i). [和 如果 对 所 有 n > 1, PR = 0, 则 定义 dli) = 0]. 如 果 在 随机 游 动 


25 常 返 性 51 


( 见 式 (2.2)) 中 所 有 7; = 0, 则 每 个 状态 的 周期 为 2. 如 果 对 某 个 状态 io, rio > 0, 那 
么 每 个 状态 的 周期 为 1, 因为 这 时 不 论 初始 状态 j 如 何 , 系统 都 能 到 达 状 态 io, 并 且 
在 回 到 状态 j 之 前 停留 在 状态 io 的 时 间 可 任意 长 . 

具有 个 状态 的 有 限 马尔 可 夫 链 , 者 其 转移 矩阵 为 


n 
ee 、 
0 1 0 0 |. + 0 
0 0 ... ... 0 
P= 
0 0 …: 1 
1] 0 0 ..，..， ，,.， 0 
则 每 个 状态 的 周期 都 是 7. 


我 们 列 出 状态 周期 的 三 个 基本 性 质 但 不 给 予 证 明 (这 方面 问题 可 参阅 本 章 问 题 
2-4). 

定理 4.1 如果 一 沁 则 ad(i) = ad(j). 

此 结论 表明 在 每 个 互通 的 等 价 类 中 周期 是 一 常数 . 

定理 4.2 ” 若 状 态 i 具有 周期 d(i), 则 存在 一 个 与 i 有 关 的 整数 N, 使 得 对 所 
有 n>N 

PT) > 0. 

此 结论 说 明 从 状态 i 出 发 , 经 过 周期 的 足够 大 信和 数 时 间 后 , 回 到 状态 i 的 概率 
均 大 于 0. 

推论 4.1 车 PF? >0, 则 Per > 0 对 所 有 足够 大 的 正 整数 ”都 成 立 . 

一 个 马尔 可 夫 链 , 若 其 每 个 状态 的 周期 都 为 1 则 称 为 非 周 期 的 . 我 们 遇见 的 绝 
大 多 数 马尔 可 夫 链 过 程 都 是 非 周期 的 . 随机 游 动 通常 作为 实际 问题 中 周期 情形 的 典 
型 代表 . 后 面 将 介绍 非 周期 情况 的 一 些 结果 , 对 一 般 情 况 , 相应 的 结论 通常 只 叙述 
而 不 加 证 明 , 相信 勤奋 的 读者 能 够 很 容易 地 把 证 明 补 上 . 


2.5 常 返 性 
考虑 任意 一 个 固定 的 状态 i. 对 每 个 整数 n > 1, 我 们 定义 
fi = Pr{iXn = i, Xv #6v=1,2,.…,n~1|Xo=. 


换 句 话说 , 及 是 从 状态 i 出 发 , 在 第 nn 次 转移 时 首次 回 到 状态 i 的 概率 . 显然 fi; = Pi 
且 自 可 依照 如 下 公式 递 推 计算 
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= DP ‘n>1, (5.1) 


其 中 对 于 所 有 的 i 我 们 定义 fii = 0. 等 (5.1) 是 把 计算 P# 的 事件 按照 首 捞 状态 
i 的 时 间 进 行 分 解 而 导出 的 . 事实 上 , 我 们 来 考虑 这 个 过 程 在 已 知 Xo = i 的 条 件 下 
Xn = 二 i 且 在 次 转移 后 首次 回 到 状态 i 的 所 有 可 能 的 实现 , 记 此 事件 为 Ek. 显然 
事件 Ek(k = 1,2,…,n) 是 互 斥 的 . 从 Xo = i 出 发 , 经 过 上 次 转移 首次 回 到 状态 i 
的 概率 定义 为 斋 , 在 余下 的 m 一 次 转移 中 我 们 只 关心 那些 使 X= i 的 实现 . 利用 
马尔 可 夫 性 质 ， 
Pr{ 本 } = Pr{ 在 次 转移 时 首次 返回 |Xo = 让- 
Pr{Xn =iXk=i}= fi.Pr 入 天生 mu 

(注意 , P93 = 1). 因此 


Pr{Xn = iXo=i} = Spr{B,) 


k=] 
= Shpn- -D1 及 PE 
k=1 
最 后 的 等 号 根据 定义 f = 0. 
下 面 我 们 介绍 相关 的 母 函 数 . 
定义 ”序列 {Pz} 的 母 函数 Pi;(s) 是 
Pi(s)= 2 ,Pis", |s|<1. (5.2) 
nn 二 0 


用 类 似 方法 也 可 定义 序列 {5}( 注 : 当 ; 关 了 时 骨 的 定义 见 下 面 等 式 (5.9)) 的 母 
函数 是 


Ri(s)= > fis", sl < 1 (5.3) 
nn 二 0 
回顾 如 下 事实 ; 如果 
A(s) = apst 且 Bl(s)= bs (5.4) 
k=Q i=0 
1. 
A(s)B{s) = (>a (S ee!) 


二 aobo 十 (oibo + bioo)s + (a2bo + orbl + aobz)s 十 ..， 


骨 _ 
A(s)B(s) =C(s) = es", lsl <1, 


和 一 中 
其 中 
cr = aobr 十 alpr-l 十 … 十 arbo. 
如 果 我 们 把 户 看 作 ax, Ps 看 作 b, 则 比较 式 (5.1) 和 式 (5.6) 即 得 到 
Fii(s)Pii(s) = Pi(s)—1, |sl<1, 


或 


P:i(s) 一 13| <1. 


1 
1] 一 Fi; (s) 
在 式 (5.7) 中 减 1 是 必要 的 , 因为 当 m = 0 时 式 (5.1) 不 成 立 . 
利用 证 明 式 (5.1) 的 类 似 方 法 可 得 到 


ne 
nn k pn—k 。 。 
P= fiPy", ifhnz>0, 
k= 二 0 


(5.9) 


其 中 记 是 从 状态 i 出 发 经 过 上 次 转移 首次 达到 ; 的 概率 . 对 所 有 i 和 j, 我 们 重新 


定义 记 = 0. 对 照 式 (5.5), 由 式 (5.9) 推 得 


Pi;(s) = Fij(s)P;;(s), |s| <1. 


(5.10) 


我 们 说 状态 i 是 常 返 的 , 当 且 仅 当 》, 上段 = 1. 这 就 是 说 , 状态 i 是 常 返 的 . 当 


从 一 ] 
有 目 仅 当 从 状态 i 出 发 经 过 有 限时 长 之 后 回 到 状态 i 的 概率 为 1, 非常 返 的 状态 又 称 
为 瞬 态 . 下 面 我 们 来 证 明 常 运 的 或 非常 返 的 状态 与 7 步 转移 概率 Pi 关系 的 一 个 定 


理 . 在 证 明之 前 , 需要 如 下 引 理 : 
引 理 5.1  ( 阿 贝 尔 ) 


OO 


(a) 如 果 》 ak 收敛 , 则 


k=0 
Dk ako 
kk 二 0 天 一 人 
( lim 指 s 从 小 于 1 的 方向 趋 于 1). 
(b) 如 果 ak 关 0 且 Jam > ks 二 @ 二 oo, 则 


k=0 


OO N 

》 ak = lim Qk 一 a. 
一 co 

k=0 k=0D 


| 


(5.11) 
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证 明 (a) 我 们 要 证 明 


lim = 0. (5.12) 


3 ax(s* —1) 
k=0 


因为 》 ak 收敛 , 对 任意 s > 0, 我 们 可 找到 这 样 一 个 N(e) 使 得 对 所 有 N' > N 有 


k=0 
六 E 
Qk! < 4 
k=N 
选取 这 样 的 入 后 ， 
Oo N co 
> ak(s 一 二 | 三 D> ak 人 (8 一 1) 十 >》 axr(s* — 1) 
大 一 0 k=0 k=N+1 
Ny ~ (5.13) 
< > ax(s® 一 1)| 十 >》 ak(s — 1)|. 
k=0 k=N+1 
对 于 0<s<1l 有 ， y 
> ax(s* -1)i< MN |s™ -1|, (5.14) 
k=0 
其 中 M = max lax| < oo, 所 以 对 充分 靠近 于 1 的 s, 我 们 有 
N 
| > ak(s* -1)| < = 
k=0 < 
为 了 估计 “Sak(s* - 1), 我 们 分 部 求 和 , 记 A = 3、a,, 于 是 
天 一 六 十 王 全 一 攻 
> ak(s ~ 1)| = > (Ak — Apr1)(s* — 1) 
k= NN 十 1 k=N+1 
(5.15) 


OO 
4N+1(8 +1 —1)+ > Ak(s™ — s* 1)|, 
k=N+2 


显然 , 式 (5.15) 右边 不 超过 
le D+ ge < 


2 
综 上 所 述 , 当 s 充分 靠近 于 1 时 , 我 们 有 
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< E， 须 


SN ans! —1) 
k=0 


(b) 对 于 0<s<1,D Darst < 5 ax. 所 以 当 a = oo 时 是 显然 的 . 若 a < oo, 则 


k=0 k=0 
由 我 们 的 假设 
>》 aks*<a<o 当 0 <s<1. 
天 一 0 
因此 , 对 所 有 7 
> Qk a. 
k= 二 0 


由 于 》 ok 是 m 的 有 界 单调 增 函 数 , 因此 它 存在 有 限 极限 , 记 为 %'. 但 由 (a) 立即 


k=0 
推 得 a/ = ou. 且 
由 此 引 理 我 们 容易 证 明 
定理 5.1 状态 i 是 常 返 的 , 当日 仅 当 
a 
n= 二 1 


证 明 ”假设 i 是 常 返 的 , 即 》 由 = 1. 则 由 引 理 5.1(a) 


n= 二 1 


lim 2 fl 一 Bm Fi;(s) = ]. 


8 一 


这 样 , 从 式 (5.8) 得 
由 引 理 5.1(b), 我 们 有 
>》 开 = oo， 


n=0 
必要 性 得 证 . 为 了 证 明 充 分 性 , 假设 状态 i 是 瞬 态 的 , 即 》 f? < 1. 利用 引 理 5.1(a) 
人 一 1 
并 结合 式 (5.8), 我 们 推 得 


lim Pi(s) < oo， 
5 一 上 一 
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现在 再 根据 引 理 5.1(b), 我 们 得 到 2》, P? < oo, 这 与 假设 矛盾 , 从 而 充分 性 得 
二] 
十 ， 国 
由 定理 5.1 我 们 立刻 得 到 一 个 推论 . 
推论 5.1 如果 i 一 7 了 且 纪 是 常 运 的 , 则 了 也 是 常 返 的 . 
证 明 ”由 于 i 一 j, 则 存在 m,n, 使 得 


Ps>0 和 Pi >0. 


设 v > 0. 利用 通常 证 法 ( 见 2.4 节 ) 可 得 Pm+"+? > Pm PsPr, 然后 求 和 , 得 
>》 Prt"tv 》 PrPRPY = PP Ps. 

v 二 0 Jv 二 0 v=0 
因此 , 若 》 Pa 发 散 , 则 》 PY 也 发 散 . 加 


v=0 v=0 
这 个 推论 表明 , 常 返 性 也 像 周 期 性 一 样 是 一 个 类 性 质 : 即 在 一 个 等 价 类 中 的 状 
态 或 者 都 是 常 返 的 , 或 者 都 不 是 . | 
附注 ”给 定 Xo =i, 返回 状态 i 的 次 数 的 期 望 是 》 Pi. 这 样 , 定理 5.1 表明 


状态 i 为 常 返 的 当 且 仅 当 返 回 次 数 的 期 望 值 无 限 。 


2.6 ” 常 返 马尔 可 夫 链 的 例子 


例 1 首先 考虑 在 正 整 数 和 负 整 数 上 的 一 维 随机 游 动 , 在 每 次 转移 中 粒子 向 右 
移动 一 个 单位 的 概率 为 p, 向 左 移动 一 个 单位 的 概率 为 gq(p +g = 1). 因此 


Pi0 =0, n=0,1,2,.., 


2 2n)! (6.1) 
借助 于 斯 特 林 公式 ， 
nl ~ nt¥e-"V2n. (6.2) 


应 用 式 (6.2) 于 式 (6.1), 我 们 得 到 


gr7"2” (4pg)” 


Po ~ 
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容易 验证 p(1 ~p) = pg < 1, 当 且 仅 当 p==g = 3 时 等 号 成 立 . 因此 , 当 且 仅 当 
p= 3 时 》 Ph = co. 故而 , 由 定理 5.1 知 , 当 且 仅 当 p 一 g = 3 时 一 维 随机 游 动 是 


nn 二 0 


第 起 的 . 记 住 , 常 返 性 是 一 个 类 性 质 . 可 以 想象 , 如 果 p > gq, 初始 位 于 原点 的 粒子 趋 
阿 于 +co( 奋 p < 9 趋向 于 -oo) 而 不 再 回 到 原点 的 概率 是 正 的 . 

例 2 现在 我 们 来 看 一 下 在 全 平面 上 的 二 维 随 机 游 动 ， 设 从 某 个 状态 往 上 、 
下 、 左 、 右 移动 一 个 单位 的 概率 都 等 于 1/4. 我 们 仍然 研究 由 原点 代表 的 状态 的 常 
退 性 . 考虑 向 右 移动 i 个 单位 、 向 左 移动 i 个 单位 、 向 下 移动 了 个 单位 、 向 上 移动 ; 
个 单位 的 所 有 可 能 的 路 线 , 其 中 2i + 27 = 2n. 通过 计算 我 们 有 


2n 二 1 _ 
Fo =0, n= 0,1,2,..., 


2n)! /1\?" (6.3) 
P2n = 《2m)L WE mm 本 时 日 ， 


[ 式 (6.3) 是 依据 多 项 分 布 推 得 .] 式 (6.3) 的 分 子 和 分 母 同 乘 以 (n0)2, 得 到 


秦 -( 人 (全 (人 ( 


因此 


再 一 次 利用 斯 特 林 公式 (6.2), 我 们 得 到 


2 人 1 
Foo ~ 
17 


因此 , 》, P% = co, 即 由 原点 代表 的 状态 也 是 常 返 状 态 . 
nn 二 0 
例 3 ”我 们 考虑 在 三 维 空间 里 的 对 称 随 机 游 动 . 同 前 面 一 样 , 我 们 得 到 


Pot! =0, n = 0,1,2,.…., 


Pan = 人 G3) (6.4) 


TDP 
ii OSIHJSn (ni jl(n i))! 
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2n 
用 (nl)? 乘 以 分 于 分 母 并 提出 因子 (3 ,得 


1 2n nl < TAN 人 
PG = 天- i . - (3) 6.5 
92n ( 7 ) 2 im 一 和 一 7 3 (6.5) 


1 2 
Po < “n pan | 志 (6.6) 
其 中 
cn 一 Max i . (6.7) 
i,J,0RSiTIn ij!l(n 一 ?一 7)! 
注意 , 上 面 我 们 利用 了 等 式 
nl NW 
2 lm i (3) = (6.8) 


对 于 较 大 的 mw 当 i=j ~ 2 时, cn 值 可 以 达到 . 下 面 我 们 来 证 明 这 个 结果 . 设 ip 和 
jo 使 得 


nl! 
pr pr < 1 十 7 7). 
in ~ i— 7)! (Sitijgm 
达到 最 大 值 . 下 面 四 个 不 等 式 是 显然 的 : 
n! nl! 
jol(io ~ Dl(n si-iot+)! ~ joliol(n ~ jo — io)! 
的 n! 
一 一， 
Jo!(io 十 1)!(n 了 4J0 一 20 一 1)! jolio!(n 一 90 一 io)! 
Ts 人 1 
7 太一 一) 
(jo ~ 1)liol(n 1970 一 io 十 1)! Jolio!(n 一 加 — io)! 
nL, 他 
(jo+ 1)liol(no—jo—io—1)! © jo!liol(n ~ jo ~ io)! 
这 些 不 等 式 简 化 为 
nw0—1<2j niotl, 
njJo—ls<2iogn—-jot+l. 


因此 , 对 较 大 的 n,io ~n/3,jo ~ n/3. 把 i=j = 了 代入 式 (6.7), 式 (6.6) 变 为 


n ni 2n 
Pe < a n ) 0.9) 
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石 我 们 利用 斯 特 林 公式 , 不 等 式 (6.9) 右边 渐 近 于 
3V3 


D3/2n3/2 
对 上 面 这 些 项 求 和 , 得 局 
3V3 
> 


DT3727375 < oo. 


pp 
me 


因此 》 Ph < co, 由 定理 5.1, 0 所 表示 的 状态 是 瞬 态 . 由 于 常 返 性 是 一 个 类 性 质 且 


=] 

所 有 状态 互通 , 我 们 已 看 到 在 一 维和 二 维 对 称 随机 游 动 中 粒子 必然 能 返回 原来 所 处 

的 任何 一 个 状态 , 然而 , 在 三 维 对 称 随机 游 动 中 , 粒子 一 旦 离开 某 个 状态 之 后 , 不 再 

返回 该 状态 的 概率 却 是 正 的 . 
例 4 ”现在 考虑 描述 二 项 试验 成 功 游程 的 马尔 可 夫 链 , 其 转移 概率 矩阵 是 


Dp0 一 Do 0 0 si 

pi 0 1 一 21 0 ss 

D3 0 0 ] 一 2o sa 

， ; (0 < pi < 1). 
Pr 0 1 — pr 0 


这 个 马尔 可 夫 链 的 状态 全 部 属于 同一 个 等 价 类 (从 任 一 状态 出 发 都 可 以 达到 其 他 任 
何 状 态 ). 因为 常 返 性 是 一 个 类 性 质 ( 见 推论 5.1), 所 以 我 们 仅 研究 状态 0 的 常 返 性 . 
经 计算 得 

fo0 = po -1 — (1 — po), 


job = (Ha -0 pn—1i, n>1. (10) 
i=0 
式 (6.10) 可 重 写 为 
一 2 
fo0= ke! -pi)ll—(1— pr) n>1, 
i=0 


f00 = (1 — po)(l 一 21) . (1 — Pn_2) 一 (1 — po)l(!l — D1) 。.。 。 (1 — pn-1), n>1, 
记 
7 二 (1 — po)(1 ~— p1):… (1 ~ pn), n 之 0, 
| l, 多 三 一】 . 
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对 多 (2 >1) 求 和 , 我 们 有 


mn 二 1 m+t+1 
>》, foo = >》, (un -2 ~— Un—1) 
1 二 1 1 二 1 


= (1 — vwo)+ (Wo ui) + 二 (Um-1 — Um) 


或 
7 十 1 
》 f=1- unm. (6.11) 
=] 
下 面 的 论证 我 们 需要 如 下 引 理 : 
引 理 6.1 如果 0 < pi < 1,i=0,1,2,…, 则 wm = ][(l 一 pi) 一 0(m 一 oo) 


2 二 0 


的 充分 必要 条 件 是 》_pi = oo. 


= 


证 明 设 Dr- = co. 由 于 exp( 一 pi) 的 级 数 展开 是 一 交错 级 数 , 且 其 各 项 绝对 
值 是 递减 的 ， 我 们 得 


1 pi<1-Pi+ 人 -如 + .= exp(—pi),i = 0,1,2,.…. (6.12) 


由 于 (6.12) 对 所 有 i 成 立 , 从 而 IIa-m < exp (- > -但 是 由 假设 ，lim > pi 


t= t= t= 


= co, 因此 lim He- pi) = 0. 为 证 必要 性 , 直接 由 归纳 法 易 知 , 对 任意 ; 及 所 有 
m 二 7 十 1,7 十 2,: 


Ta — pi) > (1 — pj — Pj+1 —** ~ Pm). 
t= 


现 假设 》 pi < oo, 则 对 某 个 了 > 1, 成 立 0 < 》 ps; < 1 这样， 


t=1 t=7 


tm Tt -pi) > lim (1 — yp > 0， 
4 一 9 i 二 7 


这 与 um 一 0 耶 慎 . 澳 
现在 我 们 回 到 式 (6.11), 应 用 引 理 6.1 立刻 推 得 : /m= 1 当 且 仅 当 yp, - 


nn 二 1 :二 0 
oo, 即 状态 0 是 常 返 的 当 且 仅 当 p; 之 和 发 散 . 
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我 们 顺便 指出 如 下 事实 . 给 定 任意 一 集合 {at oz,…},ai > 0, 且 > < 1, 我 
们 可 以 找到 一 列 pi,0 < Di < 1， 由 它 所 确定 的 上 述 马 尔 可 夫 链 有 fo6 = = Un. 为 此 ， 令 


foo = Do = 1) 


fo = (1 — po)p1 = ao2， 


由 此 确定 
Pl 1 ~ 一 Qi 
记 
00 = (1 — po)(l 一 21)p2 = 一 43， 
这 蕴含 着 
Q3 
Pp2 二 二 
] 一 1 一 已 2 


如 此 类 推 , 我 们 得 到 满足 0 < p; < 1 的 一 列 pi. 


2.7 关于 党 返 性 的 补充 


下 面 定理 表明 , 者 一 个 指定 状态 一 定 是 常 运 的 , 则 此 状态 将 以 概率 1 出 现 无 限 
次 . 记 

Qii = Pr{ 一 个 粒子 从 状态 i 出 发 无 限 次 地 返回 状态 计 、 

定理 7.1 状态 i 是 常 返 的 或 瞬时 的 , 分 别 对 应 于 Qii 等 于 1 或 0. 

证 明 设 Qi 定义 为 

Q = Pr{ 一 个 粒子 从 状态 i 出 发 至 少 N 次 返回 状态 让 . 
按照 首次 返回 时 间 来 分 解 事 件 Qi ,我 们 有 等 式 


N kAN-1 六 一 1 
ii ~ fhQA = Wi ii 


天 一 
其 中 ， fi 一 >》 大. 
关 一 1 
递 推 , 得 到 
= fiQi = (fi) Qu = Qi 


但 ， 由 定义 Qu = fi 因此 
一 (fa). 
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由 于 im QN = Qi, 我 们 得 到 Qi; = 1 或 0 分 别 对 应 于 太 = 1 或 <1, 即 对 应 于 状 
态 i 是 常 运 的 或 膀 时 的 . 
定理 7.2 者 i j 且 类 是 沉 返 的 , 则 


OO 
* Tw __ 
f=》 ij 二 1- 
他 一 二 


证 明 简 单 , 从 略 . 
我 们 定义 符 导 Qij 为 
Pr{ 粒子 从 状态 i 出 发 无 限 次 到 达 状 态 分 . 
由 定理 7.2 立即 得 到 如 下 推论 ， 
推论 7.1 ”如果 ic 一 7 了 且 类 是 常 如 的, 那么 @i;; = 1 
证 明 ” 昂 知 
Qi = fi Qi 
即 然 ; 是 常 返 状态 ， 由 定理 7.1 知 | (ji = 二. 再 由 定理 7 .2 知 ， fi = 1. 因此 (ij 二 |. 
加 
初等 问题 


1. 试 求 下 列 马 尔 可 夫 链 的 转移 概率 矩阵 ||Px|| : 

(a) 考虑 一 组 抛掷 硬币 的 试验 , 每 次 试验 出 现 正面 的 概率 为 p, 在 时 刻 n( 即 在 ”次 抛掷 
后 ) 过 程 的 状态 是 ”次 抛掷 中 出 现 的 正面 数 减 去 出 现 的 反面 数 . 

(b) N 个 黑 球 和 NN 个 白 球 放 在 两 个 铅 里 , 使 得 每 个 钢 装 有 NN 个 球 . 每 次 从 两 个 铅 中 各 
随机 抽取 一 个 球 , 相互 交换 后 又 放 回 负 中 . 系统 的 状态 是 第 一 个 饶 里 的 日 球 数 . 

(c) 一 只 白鼠 放 进 如 下 图 所 示 的 迷宫 , 白鼠 随机 地 从 一 个 格子 移动 到 相 邻 格子 , 即 , 如 果 
它 离 开 一 个 格子 的 途径 有 大 种 , 则 选择 其 中 一 条 途径 的 概率 为 1/k. 这 只 上 日 鼠 每 单 仪 时 间 改 
变 一 个 格子 . 系统 的 状态 是 白鼠 所 处 格子 的 号 码 . 

答案 

(a) Px = Pr{ 在 nn 十 1 次 抛 撕 后 正面 数 减 去 反面 数 等 于 | 在 n 次 

抛掷 后 正面 数 减 去 反面 数 等 于 站} 


pb 如 果 六 一 了 了 十] 
一 1 一 2 如 果 k=j-—1, 
0 其 他 . 


(b) Pk = Pr{ 在 第 ”+ 1 次 交换 后 第 一 个 镶 里 有 上 个 白 球 | 在 第 n 次 交换 后 第 一 个 绕 
里 有 j 个 日 球 } 
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， 2 
时 ) 如 果 k = j 一 1， ;= 1,2,.…,N, 
N 
jV/N-; 
Ea hi k= =0,1,...,N, 
2 ( 圭 ) (于 )， 如 果 k = 7 j=0,1, 
. 、\ 2 

(1- 才 ; 如 果 k = 了 十 | j=0,1,.…,N-—1, 

0 其 他 ， 


并 且 Px 狐 立 于 nn. 


2. (a) 镶 4 和 B 共 装 有 NN 个 球 . 我 们 做 这 样 的 试验 : 在 时 刻 tt = 1,2,…) 从 六 个 球 
中 随机 抽取 一 个 球 (所 有 选取 是 等 可 能 的 ), 然后 随机 抽取 一 个 锐 (选中 铅 4 的 概率 为 p, 选 
中 铅 B 的 概率 为 9), 再 把 前 面 抽取 的 球 放 入 这 个 镶 中 . 每 次 试验 后 系统 的 状态 由 饶 4 中 球 
的 数目 来 表示 . 试 确 定 此 马尔 可 夫 链 的 转移 概率 矩阵 . 


(b) 假设 在 时 刻 上 铅 4 中 刚好 有 个 球 . 在 时 刻 + 1 一 个 镀 被 选取 的 概率 正比 于 它 
所 装 的 球 数 ( 即 4 被 选中 的 概率 为 &/N, B 被 选中 的 概率 为 (N 一 有 )/N.) 然后 以 概率 p 从 
4 抽取 一 个 球 或 以 概率 4 从 BB 抽取 一 个 球 , 放 入 前 面 选取 的 锐 中 . 试 确定 此 马尔 可 夫 链 的 
转移 概率 矩阵 

(o) 假设 在 时 刻 t+ 1 一 个 球 和 一 个 色 被 选取 的 概率 都 取决 于 铝 中 球 的 数目 ( 即 , 从 4 
中 抽取 球 的 概率 为 丰 , 从 B 中 抽取 球 的 概率 为 一 一 ， 负 4 以 概率 元 被 选中 , 镶 B 以 概 
率 一 二 被 选中 ). 该 系统 的 状态 为 镶 4 所 含 球 的 数量 , 试 确定 该 马尔 可 夫 链 的 转移 概率 抵 
阵 . 

(d) 试 确定 (a)、(b) 和 (c) 中 的 等 价 类 

答 委 
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一 若 k=i+1 
1 AN 一? 
十 k= 二 =2 
(a) Px NT NN 4 右 i=0,1,2,...,N. 
9 若 六 三 ?一 | 
0, 其 他 ， 
pol 若 kk 二 i 十 1 
i N-i 
一 人 十 了 各 k=1, 
(b) Px Ny N 4 i =1,2,...,N—1. 
一 pp 若 k=i—1, 
N 
0, 其 他 ， 


Nz N2 ? 苛 k 一 ?， 
(0 P A 若 上 =i 二 1 或 8 =i 一 1 
N2 
0， 其 他 ， 


等 价 类 是 {0}, {1, 2, 0) AN 一 1}, {N}. 


3. (&) 设 一 个 心理 被 试 对 一 组 刺激 {S51, S2,…, Sw} 的 每 一 个 刺激 作出 4: 和 A2 两 个 
反应 中 的 一 个 . 现 随机 抽 选 单个 刺激 (所 有 刺激 被 选 是 等 可 能 的 ), 被 试 对 所 抽 选 的 刺激 作 
出 反应 . 在 每 次 试验 中 以 概率 r(0 < r < 1) 强化 , 并 且 强 化 与 先前 试验 情况 无 关 . 当 强 化 出 
现时 所 选取 的 刺激 不 改变 它 的 条 件 状 态 , 而 当 强 化 不 出 现时 , 刺激 却 引起 另 一 反应 . 考虑 该 
马尔 可 夫 链 , 其 状态 变量 是 引起 反应 41 的 条 件 刺激 数 . 试 确定 它 的 转移 概率 矩阵 


(b) 一 心理 学 被 试 3 能 作 三 个 反应 Ao, 41 和 42. 反应 ho 对 应 于 猜测 状态 . 若 5 作 
反应 4+, 则 试验 以 概率 ri 强化 被 试 , 从 而 在 下 一 次 试验 中 5 将 作 相 同 的 反应 . 若 强化 不 出 
现 (其 概率 为 1 -- ra) 则 下 次 试验 5 将 作 猜测 反应 , 类 似 地 , rs 是 关于 反应 42 的 强化 概率 
若 强化 出 现 则 下 一 次 作 相同 的 反应 , 否则 将 作 猜 测 反应 . 当 S 处 于 猜测 状态 时 , 在 下 一 次 斌 
验 中 仍然 处 于 此 状态 的 概率 为 1 - , 而 分 别 以 3 和 3 的 概率 作 反 应 4A! 和 42. 考虑 由 被 
猜 试 的 状态 所 构成 的 马尔 可 夫 链 , 试 确定 其 转移 概率 矩阵 - 


N 一 1 
答 业 : (a) Pi 一 nT, Pist+1 一 N -(1 和 T)， Fii_1 一 (1 T); 其 余 ， Fi; 一 0(2， 7 一 
1,2,...,N). 


C 
(bj Poo = 1—ce,Pn = Po = pi =1—71,Pi=n,Po=1— 72, P22 = 72. 


4. 若 马尔 可 夫 链 的 转移 概率 矩阵 为 


局 题 65 


0 0 1 0 1 0 0 
1 1 0 000 1 
(a) 3 5 0 bo too 
1110 3 0 了 0 
3 3 3 3 3 
试 确定 其 不 同 状 态 的 类 和 周期 . 


5. 考虑 重复 的 独立 试验 , 每 次 试验 分 别 以 概率 p 和 4 出 现 结果 5( 成 功 ) 和 天 (失败 ). 试 
确定 使 得 首次 出 现 事 件 SF( 即 成 功 之 后 紧 接 着 是 失败 ) 所 做 的 试验 次 数 的 分 布 ， 奉 对 于 事 
件 SSF 和 SFS, 其 结果 如 何 ? 

6， 可 采用 如 下 方法 估计 某 有 限 群 体 所 含 个 体 的 数目 ， 这 对 于 野生 动物 群体 , 诸如 鱼 类 
等 可 能 是 恰当 的 . 先 随机 抽取 该 群体 中 的 一 个 个 体 , 贴 上 标签 然后 放 回 . 再 抽取 另外 一 个 , 同 
样 贴 上 标签 后 放 回 , 直至 抽取 到 先前 已 经 抽取 过 的 个 体 时 为 止 , 假设 了 次 抽取 之 后 这 种 情 
况 发 生 , 我 们 则 停止 试验 (此 后 还 可 以 加 上 别 的 标签 重新 试验 )， 我 们 希望 根据 7 的 值 来 估 
计 群 体 所 含 个 体 的 数量 N. 

设 X。 是 最 近 连 续 观 察 到 的 没有 贴 上 标签 的 个 体 数 . 则 对 于 n= 0,1,…,T 一 1, X= 0， 
而 XT = 0, 所 以 了 T 了 是 首次 达 到 等 的 时 间 , 了 = min{n > 1: XX» = 0}. 

(a) 对 于 任何 固定 N, 试 证 明 (Xn) 是 成 功 游程 马尔 可 夫 链 , 并 指出 其 概率 ps。 和 qn. 

(b) 计算 Pr{T = tIXo = 0},t = 2,…,NN.( 见 第 1 章 初 等 问题 2.) 

7. 计算 机 部 件 的 服役 寿命 是 一 个 用 离散 单位 度量 的 随机 变量 也 其 中 Pr{T = k} = 
ak 大 = 1,2,.…. 设 从 一 新 部 件 开始 , 每 一 部 件 损坏 时 被 新 的 部 件 替 换 . 令 X,, 是 正在 使 用 的 
部 件 在 时 刻 1 的 年 龄 , 则 (Xs) 是 一 成 功 游程 马尔 可 夫 链 . 

(a) 计算 概率 pt 和 9g;. 

“计划 替换 ”策略 是 指 : 在 时 刻 N 之 前 部 件 损坏 时 换 新 的 , 在 时 刻 N 不 管 部 件 损坏 与 
否 都 换 新 的 . 这 样 , 替换 时 间 是 T* = min{7T, N}, 其 中 工 = min{n > 1: X» = 0}. 

(b) 计算 EF[T"*]. ( 见 第 1 章 初等 问题 1,2 和 3.) 

8. 设 某 人 身 患 高 传染 性 疾病 未 被 公共 卫生 官员 察觉 而 进入 一 居民 点 . 在 每 一 段 时 间 里 ， 
该 疾病 或 者 以 概率 p 传染 给 另外 一 个 人 , 或 者 由 于 带 病 者 的 症状 出 现 而 被 公共 卫生 官员 发 
现 , 后 者 发 生 的 概率 为 1 - p. 试 计算 在 居民 点 中 已 被 感染 但 未 被 发 现 的 患者 数目 的 概率 分 
布 . 此 处 我 们 假设 每 次 传染 都 与 第 一 次 一 样 ， 


[9 是 
1. 每 个 n x n 随机 甜 阵 王 ( 托 阵 己 三 | 已 让 和 兰 满 足 0 芭 已) 1 和 PP; 二 1, 则 


J 
称 为 随机 矩阵 ) 对 应 一 个 马尔 可 夫 链 , 其 一 步 转 移 矩 阵 正 是 忆 . 然而 并 不 是 每 一 个 nxn 随 
机 算 阵 都 是 某 马 尔 可 夫 链 的 二 步 转移 息 阵 .特殊 地 试 证 明 一 个 2 x 2 随机 竹 阵 是 某 马 尔 可 
夫 链 的 二 步 转移 抢 阵 的 充分 必要 条 件 是 它 的 主 对 角 线 各 项 之 和 大 于 或 等 于 1. 
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当 m > M 时 存在 一 非 负 整数 列 {cj }#_， 满足 


此 
md = Dein;: 
j=1 

(下 面 问题 4 需要 这 个 结论 .) 

提示 ; 令 4= {nin = cin1 十 … 十 Cknk, {ci} 为 非 负 整数 }. 

令 B= {ni 十 bjnj|ni,n2,…,n; € 4, 且 01,…,b; 是 正 的 或 负 的 整数 }. 

设 d 是 B 中 最 小 的 正 整数 , 证 明 d 是 4 中 所 有 整数 的 公 因子 . 然后 证 明 d 是 4 中 所 
有 整数 的 最 大 公 因 子 . 因此 qd = d. 重新 排列 表达 式 d = Qini1 十 …: 十 aini 中 的 各 项 , 使 得 
正 系数 项 都 在 前 面 . 这 样 d = Ni 一 No, 目 Ni € h, No € h. 令 M 是 正 整 数 ,，M = N3/d,， 
每 个 整数 m > M 可 表示 为 m= M+k= Ns/d+k,(k=0,1,2,:….), 且 k = 6N2/d+b, 
其 中 0 <b< Na/d 上 且 5= 了 当 jNa/d) < k < (+1)Na/d,j = 0,1,2,.…, 所 以 
md = N3 + (6N2/d+b)d= No(N2 +6—b) +bN. 

3. 证 明定 理 4.1. 

提示 : 设 忆 > 0P > PP3PP > 0 对 某 m > 0 和 n > 0， 由 于 还 有 
P2 > 0, 我 们 有 Prtostm™ > 0, 这 样 d(7) 除 尽 (2 十 2s 十 和 0) 一 (十 5 十 人 m) 一 5 

4. 证 明和 定理 4.2 和 推论 4.1. 

提示 : 由 问题 2 知 存在 入 使 得 当 妈 > 六 时 , 有 


nd) Cl 人 1 十 … 十 CRPk) 
Re Pl 


5. 任 给 一 个 有 限 非 周期 不 可 约 马尔 可 夫 链 , 证 明 对 于 某 个 n, P” 所 有 各 项 都 是 正 的 . 
6. 夺 7 是 瞬 态 , 试 证 明 对 所 有 i 有 


OO 
入 
P< 
n= 二 1 


提示 : 利用 关系 式 (5.10). 

7. 设 一 马尔 可 夫 链 包含 7 个 状态 试 证 明 : 

(a) 若 状 态 大 能 由 7 达到, 则 它 至 多 只 要 7 一 1 步 便 达到 ; 

(b) 大 了 是 党 返 状 态 , 则 存在 a(0 < a < 1) 使 得 对 于 任意 n > "7, 在 nn 步 转移 之 后 首 
次 返回 状态 7 的 概率 小 于 等 于 Qa”. 

8. 考虑 某 贝 努 利 试验 序列 X1,A2, 人 3，…… 其 中 An 三 1 或 0. 假设 


Pr{Xn = 上 XXX2 ,Xn_i} 之 a>0,n= 1,2,... 


证 明 , (a) Pr{Xn = 1, 对 某 nn} = 1, (b) Pr{Xn = 1, 无 限 经 常 } = 1. 
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9. 设 
] 一 
P= ”7 ,0<a<1l,0<b<1. 
b 1 一 
证 明 
n 1 b a (1—-a—-b)"*l a -a 
~at+bllbp a a++b _b 5b 


10， 考 虑 整数 集 上 的 某 一 随机 游 动 ， 对 于 所 有 i,Piiti = p,Pii-1i = 90 <p< 
1,p 十 9 二 1). 试 确定 Pm%. 
答案 : P56" = | 人 ) rer" = 0. 
m 
11. ( 续 上 ) 求 un = P% 的 母 防 数 , 即 确定 


P(X) = > UnT”. 


n= 二 0 
1 
提示 : 利用 人 恒等式 | ” ) = (—1)" | 2 227, 其 中 对 任意 实数 a 我 们 定义 


n 


| a ) a(a—1):..…(a—n+1) 


1 

答 娄 : P(z) = (1 — 4pgz2) 2. 

12. ( 续 上 ) 试 确定 从 状态 0 出 发 返回 状态 0 时 间 的 母 函 数 . 

区 来， F(z) = 1 VI Ipaz3) 

13. ( 续 上 ) 最 终 返 回 原点 的 概率 是 多 少 ? 

14. 假设 两 枚 不 同 的 均匀 硬币 被 同时 反复 抛掷 ， 并 把 出 现 正 反面 的 次 数 记 录 下 来 . 考 
虑 在 第 n 次 抛掷 时 两 枚 硬币 正面 出 现 的 累计 次 数 恰好 相等 的 事件 饭 ,. 试 将 事件 En 与 整 
数 集 上 对 称 随机 游 动 某 状态 的 返回 时 间 联 系 起 来 . 

15. 设 1, 关 2,… 相互 独立 , 且 有 Pr{Xk = 十 1} = p,Pr{Xk = 一 1}=g=1-p, 
其 中 p>g. 令 S50 = 0,Sn = XI 十 … 十 Xn, 则 Mh = max{Sk :0<k<n} 且 
7 = Mn 一 Sn, 如果 工 (a) = min{n : 5S。 = aj, 证 明 


y VY 1 
(和 ) ) 若 D = 09 == 7 
y+11° 
pr{ max 到 < 外 = P_ [zt 
Og<k<T(a) gq g 若 p 
gt g. 
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提示 : 双 变 量 过 程 (Mn, yn) 是 正 整数 格 上 的 随机 游 动 . 这 个 随机 游 动 从 项 点 a 离开 
矩形 


的 概率 是 多 少 ? 

16.( 续 上 ) 对 上 题 添加 新 记号 , 令 7 表示 部 分 和 9n 与 其 至 时 刻 n 为 止 偏离 最 大 值 
y 个 单位 的 首 达 时 间 , 即 7 = min{n : Y= 中. 试 证 明 Mr = 57 十 9 具有 几何 分 布 
Pr{M 之 a} = 加 ,其 中 aa= 1,2,.…, 并 确定 0. 

提示 : Mr 之 a 当 且 仅 当 max YY <Yy. 


0<kST(a) 
附 记 
马尔 可 夫 链 的 部 分 理论 可 在 Feller[1] 的 后 半 部 分 找到 . 
Kemeny 和 Snell 著 的 书 [2] 有 许多 关于 马尔 可 夫 链 的 生动 例子 , 它们 来 自 心理 
学 、 社 会 学 、 经 济 学 、 生 物 学 等 学 科 . 
Chung[3] 是 致力 于 马尔 可 夫 链 结构 分 析 方 面 的 最 高 等 的 论著 . 


参考 书目 


[1] W.Feller, An Introduction to Probability Theory and Its Applications, Vol 1, 2nd. ed. 
Wiley, New York, 1957. 

[2] J.G. Kemeny and J.L.Snell, Finite Markov Chains. Van Nostrand, Princeton, New 
Jersey, 1960. 

[3] K.L. Chung, Markov Chains with Stationary Transition Probabilities, Springer-Verlag, 
Berlin, 1960. 


第 3 章 ”马尔 可 夫 链 的 基本 极限 定理 和 应 用 


本 章 3.1~3.4 节 是 研究 马尔 可 夫 链 的 重要 工具 , 每 一 本 入 门 性 的 教科 书 都 有 这 
一 内 容 . 然而 , 读者 可 以 把 3.2 节 关 于 离散 更 新 定理 的 证 明 推 延 到 第 5 章 阅 读 , 在 第 
5 章 将 介绍 一 般 的 更 新 理论 . 

3.5~3.6 节 中 的 例子 在 随机 排队 模型 中 是 经 典 的 . 其 中 一 部 分 内 容 第 一 次 阅读 
时 可 以 略 过 . 


3.1 ”离散 更新 方程 


下 面 定 理 提 供 了 马尔 可 夫 链 分 析 的 关键 工具 . 
定理 1.1 设 二 序列 {Qk}, {ux}, {bx}, k= 0, 土 ]， 土 2 ”1 满足 条 件 Qk 之 0, 
2 ar = 1,2, |klar < 00, 2 kaxr > 0,2 or < 0%0, 并 且 , 使 ai >0 的 所 有 整数 上 的 最 
大 公约 数 为 1. 如 果 有 界 实数 列 {un} 满足 更 新 方程 
十 co 
Un — D2, an-kuk = bn, n=0,+1,+2,..., 


天 一 一 CC 


则 lim wn 和 ”lim wn 存在 . 再 者 , 如 果 
lim un = 0, 


则 


3 


并 一 一 OO 


lim wn = (1.1) 


T+ OO OO 
>》 ko, 


大 一 一 Do 


在 》、”kak = oo 的 情况 下 , 上 述 极限 关系 式 仍然 成 立 , 只 是 这 时 我 们 认定 


天 一 一 Oo 
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这 个 定理 的 一 般 形式 的 证 明 已 超出 本 书 范围 . 实际 上 我 们 仅 在 为 负 信 时 {ax}， 
{ur}, {bk} 为 0 且 bx z 0 的 情况 下 利用 此 定理 , 此 情况 下 的 定理 证 明 将 在 3.2 节令 
述 . 

附注 1.1 在 aj%=0,b_%k=0 且 wk = 0(k >0) 时 ,更 新 方程 变 为 

Un 一 SV ony =0, n=0,1,2,..- 
k=0 

附注 1.2 (使 用 “更 新 方程 ”一 语 的 由 来 ) 考虑 一 个 灯泡 的 寿命 , 用 离散 单位 
来 测量 , 它 是 一 随机 变量 <, 其 分 布 为 


Pr{€=k}=axr, k=0,1,2,...,ak > 0, 》_ ak 一 工 . 


每 个 灯泡 用 坏 后 即 换 一 个 新 灯泡 . 设 第 一 个 灯泡 使 用 时 间 持 续 至 6, 第 二 个 灯泡 持 
续 至 6 +eo, 第 nn 个 灯泡 使 用 时 间 持 续 至 > &i, 这 里 & 是 独立 同 分 布 随机 变量 , 每 
个 分 布 玫 与 & 相同 . 令 wn 表示 至 时 刻 n 为 止 更 新 数目 的 期 望 值 如 果 第 一 次 更 换 


出 现在 时 刻 , 那么 到 时 刻 n 为 止 的 余下 时 间 的 更 新 数目 的 期 望 值 为 ux, 对 所 有 
可 能 值 * 求 和 , 得 


m= Dt k)ak 二 +0 Y、 Qk 


k=n+1 


Un—kQk 十 yw (1.2) 
k=0 


| 


MT 


Cn 一 天 公开 十 bn,, 


| 


= 
O 


其 中 

2 ai 一 b,. 

k=0 
式 子 (1.2) 成 立 的 理由 如 下 : 者 第 一 个 灯泡 在 时 刻 k(0 < 上 < m) 坏 掉 , 时 刻 n 之 前 
更 新 数目 的 期 望 值 为 1 + wun, 而 这 个 事件 概率 为 ak. 第 二 个 和 式 表示 第 一 个 灯泡 
持续 使 用 时 间 趣 过 时 刻 n 的 概率 . 注意 到 过 程 的 再 生性 质 , 我 们 可 把 事件 按 所 有 可 
能 的 第 一 次 更 换 时 间 进 行 分 解 求 得 wun. 

下 面 乍 理 实际 上 是 在 这 种 特殊 情况 下 的 所 有 历 性 定理 , 描述 了 非 周期 常 运 马 尔 可 

夫 链 对 所 有 i 和 7 当 n 一 oo 时 本 的 极限 性 质 . 它 的 证 明 是 基本 更 新 极限 定理 的 
一 个 简单 应 用 . 
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定理 1.2 (马尔 可 夫 链 基本 极限 定理 ) 
(a) 考虑 一 个 党 运 不 可 约 非 周期 马尔 可 夫 链 . 令 P 表示 在 给 定 X(0) = i( 初 


P: 一 1. 设 大 表示 在 第 n 次 转移 首 运 状态 i 的 概率 ， n = 0,1,2,..., 其 中 fi = 0. 


于 是 
n—k Pi = l, 铬 n=0， 
2 -{ 若 n>0. 


这 就 是 第 2 章 已 导出 的 公式 (5.1).] 则 


im PR = -二 
>》 
n=0 
(b) 在 (a) 的 相同 条 件 下 ，lim PR = lim PR 成 立 
证 明 (a) 令 
un = Pi;, N20; un=0, n<0: 
an = fii, n>20; an=0, n<O0; 
b= | 1, n= 二 0, 
0, n 天 0; 
然后 应 用 定理 1.1. 
(b) 我 们 利用 递 推 关系 式 


-DAP ,ij n>20 
世 二 


[参阅 第 2 章 公式 (5.9)]. 更 一 般 地 , 令 


其 中 


在 这 些 情况 下 , 我 们 证 明 lim yn = c. 事实 上 ， 


入 CD 入 OO 
Yn ~ C= 》 an_kZK -cc》 Qm = 》 an_k(Tk 一 C) 一 c 3 Qm. 


k=0 rt 一 0 =O m=n+t+l 
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对 于 事先 指定 的 。 > 0, 我 们 确定 K(e) 使 得 |zk -- c| < 3 对 所 有 大 > K(e) 成 立 


Kl{e) nn 


OD 
yn—c¢= >, Qn k (Tk 一 C) 十 >》_ an-k(Tk—C)—c >》 Qm, 
大 一 0 大 一 天 (ce) 十 1 m= 二 1 十 1 
所 以 
Kl(e) e nh ec 
Iyn ~ oO| < M Dan-k+3 2》, an -十 jc 2》, Qm, 
k=0 h=K(e)+1 1 一 ?3 十] 
其 中 


M = max|zk — cl. 
kK 之 0 


我 们 选择 N(e) 使 得 |c| 》，am < 3 且 对 于 n> N(e)， 


mn 二 二 1 


k(e) 1 


Don 主 > QUm < 2 


m=n~kK(e) 


则 , 当 nz N(e) 时 
E € ££€ 
一 委 一 一 一 一. 
和 — oa 十 可 十 可 一 
现在 令 


入 
yn = Pii, 


Cn 二 fi Ln 二 Pi;, 
则 得 到 想 要 的 结果 . 

附注 1.3 ” 设 C 是 一 个 常 返 类 . 则 对 于 ie C,i 4 C, 及 每 个 mn P = 0. 因此 状 
态 一 旦 进入 C 就 不 可 能 再 离开 C. 由 此 推 知 , 子 矩 阵 |Pi;l,i,7 EC 是 转移 概率 矩 
阵 , 它 所 联系 的 马尔 可 夫 链 是 不 可 约 的 且 常 返 的 . 故 极限 定理 同样 适用 任何 非 周期 
常 返 类 . 

附注 1.4 ”如 果 当 一 oo 时 ao 一 a, 则 由 初等 方法 可 以 证 明 


TAN 
i (1.3) 


这 样 , 如 果 i 属于 某 个 常 返 非 周 期 类 , 则 


.1 1 1 
i (1.4) 
2 
n=0 


3.1 离散 更 新 方程 73 


其 中 mi; 是 平均 返回 时 间 . 

如 果 i 属于 某 个 常 返 周期 类 且 周 期 为 d, 则 可 以 证 明 ( 见 第 2 章 问题 人) 当 m 不 
是 d 的 倍数 ( 即 对 于 任意 整数 n,m 关 nd) 时 , PP =0, 并 且 
a 
< 
结合 式 (1.3) 后 这 两 个 结果 , 表明 式 (1.4) 对 周期 情况 也 成 立 . 

如 果 对 于 某 个 属于 非 周期 常 返 类 的 状态 i,lim PR = 7 > 0 则 对 于 i 所 属 类 
中 的 所 有 jx; > 0 成 立 (这 个 事实 的 证 明 可 仿效 第 2 章 推论 5.1 的 方法 , 此 处 省 略 ) 
在 这 种 情况 下 , 我 们 称 该 类 为 正常 返 的 或 强 遍历 的 . 如 果 每 个 ri = 0, 且 类 是 常 返 
的 , 我 们 称 其 为 零 常 返 的 或 弱 遍 历 的 . 

定理 1.3 ”在 一 个 具有 状态 j = 0,1,2,… 的 正常 返 非 周期 类 中 ， 


OO OO 
lim PY = 7; = 》 Ti P:: 》 Tri 一 
nS OO 了 7? 了 tT- £7’ 》 


二 0 从 


lim Pr? = 
+ OO 


成 立 ， 且 mr 由 下 列 方程 组 唯一 确定 
Ni 之 0, 3 一 ] Ts 三 Snip (1.5) 
i=0 t+=0 
满足 (1.5) 的 任意 集合 (mi)2o 称 为 马尔 可 去 链 的 平稳 概率 分 布 . 我 们 在 第 11 章 将 
进一步 研究 这 个 概念 . | 
证 明 ”对 每 个 2 和 M,1= 》 Pi > 》 Ph. 令 n 一 00 并 利用 定理 1.2, 对 


j=0 j=0 


M 
任何 M 我 们 得 到 1 > 和 于 是 >" < 1. 由 于 Po+1 > > 2 有 Pei 如 果 令 


k= 


n 一 oo, 则 我 们 得 xr; > 3 xkPrj. 接 下 来 , 由 于 左边 与 M 无 关 , 当 M 一 oo 时 , 有 


k=0 


oo 
ny 之 Drk Pe. (1.6) 
k=0 


用 Pi 乘 上 式 两 端 , 然后 依 7 求 和 并 利用 式 (1.6), 推 得 x; > Srp 如 此 类 推 


k=0 
对 任意 n 有 mi > 》、mxP5. 假设 严格 不 等 式 对 于 某 个 j 成 立 , 关于 j 把 这 些 不 等 
式 相 加 , 我 人 有 


co oo oo 
> > YY mpPe = 》 re), Pe = 》 Th 


7=0 大 一 0 k=0 j=0 k=0 


| 和 
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这 就 发 生 了 秘 盾 . 因此 对 所 及 7 = 》 ns PE. 今 几 一 o0, 由 于 和 mx 收 售 且 PE 
是 一 致 有 界 的 , 则 对 每 个 7 有 一 
j= Dr lim Ph = Dr 
k=0 k=0 
由 正常 返 性 知 7 > 0; 因此 Dis 二 
假设 > = {zn} 满足 关系 式 (1.5), 则 
gk = 3 = De 
j=0 j=0 


如 令 n 一 co, 得 


zp = Dz; lim PR = re Dz, 一 Ak. 图 
了] 一 (0 7=0 
例 ”考虑 一 类 随机 游 动 , 其 转移 矩阵 为 (参阅 2.2 节 例 B) 
0 1 0 ... ... 
gq 0 pp 1 ££. 


这 个 马尔 可 夫 链 具有 周期 2. 然而 , 这 一 次 我 们 要 研究 其 平稳 概率 分 布 的 存在 性 , 也 
就 是 说 , 我 们 希望 确定 方程 


vo z 
2i 一 >》 zj = 2-17i-1 十 Gil1CiHli 2 一 0,1 (1.7) 
j=0 


满足 规范 化 条 件 DT 一 的 正解 ， 其 中 Dp-i 一 0, po 一 l, 因此 Jv0 一 NL1. 在 方程 


t=0 
(1.7) 中 令 i = 1, 我 们 可 以 用 zo 确定 xz2. 再 令 i = 2, 可 以 用 zo 确定 za, 如 此 类 推 ， 
得 


» 2 二 且 时 , 
z= 1Ds 1 =zof] Dk .i> 
Qidi—l1'' "di ki0 Gk+1 


是 方程 (1.7) 的 解 , 其 中 zo 符 确 定 . 由 于 
i—1 


1= m0+5 TT 


4 
i ki0 dk+1 
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我 们 有 , 
“0 一 名 
1 
" 2 kk 二 0 dk 十 1 
所 以 , 
Z0 > 0 当 且 仅 当 > 林产 < 00. 
+=0 k=04 


特别 地 , 如 果 对 于 上 之 1,px ==p 且 qk = g = 1 一 p, 则 仪 当 p<g 时 ,级 数 


oo ?一 


ps _1le /py 
收 线 . 


3.2 ”定理 1.1 的 证 明 


现在 我 们 对 有 < 0 时 ax, bx, Uk 均 为 0, k>>0 时 ax, br 过 0 及 ai > 0, 》 ok 一 ] 


天 一 0 
的 情况 证 明定 理 1.1. 这 时 更 新 方程 变 为 
— 》 an_Ruk = bo n= 0,1,2,.…, 
k=0 
或 等 价 地 n 
— 》 akun = bn, n= 0,1,2,.…. (2.1) 
天 一 0 


逐个 地 考虑 方程 , 容易 归纳 推 得 对 所 有 k, wx 之 0. 
由 于 假设 {un} 是 有 界 序 列 , 故 入 = lim sup un 是 有 限 的 . 令 na < no。<… 表示 


一 个 子 序 列 满足 im n Un; = 入 . 我 们 应 六 用 条 件 al > 0 证 明 jm 0 Unj-l 二 和 ^. 用 反 证 


法 ， 假设 最 后 的 关系 式 不 成 立 则 由 入 的 定义 可 知 存在 一 个 x < 入 使 得 对 无 限 多 个 
juns-1 < 入 . 取 e = [oi( 和 一 入 )]/4,M 二 supun, 并 确定 六 使得 当 m > 时 


yw > 1— (2.2) 


k=0 
选择 充分 大 的 了 使 得 mw > 六 县 


Unj >A—E, Unj-1< 和 NX <A, 0 和 过 bn < 
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及 
对 所 有 Rn 宕 nj 一 N， un < 入 十 E. (2.3) 


由 入 的 定义 和 入 的 意义 可 知 上 述 选 取 均 可 做 到 . 由 式 (2.1), 式 (2.2) 和 式 
(2.3), 我 们 有 


入 N 
Un; < 》 aptuni 十 < Daguny-k+ M >》 Qk 二 EE 


k=0 k=0 k=N+1 
N 
< akuns—k 十 2E [利用 式 (2.2) 和 式 (2.3)] 
k=0 
< (ao 十 az2 十 a3 十 … 十 QN_-1 十 QN)J(A 十 s) 十 alIX +2e 利用 式 (2.3)] 


<(1—-a) +t+e)taNXN+2 <A+3e -a(A~-N\)=A-e. 


最 后 一 行 用 到 了 e 的 选取 . 但 这 和 式 (2.3) 中 第 一 个 不 等 式 矛 盾 , 所 以 lim un,-1= 一 一 


入 . 
重复 上 述 论证 , 我 们 推 得 , 对 任何 非 负 整数 d 都 有 


lim vn,-4d = 和. (2.4) 
和 一 co 


其 次 令 Tn 二 Qn+l1 十 Cn+2 十 … | 显然 ， >》 kax = >》 7 了 m， 这 只 需要 验证 其 部 分 和 
k=0 n=0 


相等 即 可 . (我 们 不 必 假 定 级 数 Dj rn 收敛.) 此 外 &L 一 70 一 7 02 三 71 一 72， 等 等 ， 
把 它们 代入 式 (2.1), 我 们 有 


= ToUn-1 二 TiUn-_2 十 十 Tn_-1U0 十 brn， 1 = 1,2,.…. 
记 4n = Troun 十 … 十 Tnto, 我 们 把 上 式 写 成 


An = An_1+bn, n=1,2,.., 
其 中 4o = rouo = (1 一 ao)uo = bo. 由 此 推 得 A Dh 由 于 rn>0 和 wn 之 0 对 
所 有 成立, 对 任何 固定 的 N>0 和 j>0 我 们 得 到 


n=—0 


co oo N -1 
令 7 一 oo 则 得 关系 式 (ro 十 … :十 7Ni)A 瓜 》 pn， 或 等 价 地 ， 和 人 到 2》_ bn (>) * 


n=0 n= 二 0 n=0 
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由 入 > 0 的 任意 性 , 推 得 


OO 


3 


A < 一. (2.5) 


DT™ 


nn 二 0 


由 于 ww > 0 对 所 有 的 大 成立, 这 就 证 明了 定理 在 情况 》 7,, = oo 下 成 立 , 因 
nn 二 0 
为 由 式 (2.5) 易 得 入 = im un = 0. 


若 》_rn < oo. 令 /= liminf un. 仿照 limsup 情况 的 推理 我 们 得 知 ,如 果 


nn 二 人 0 
OO 


jm Un; 二 以 则 对 每 个 非 负 整数 d, jm Un;—ad = KK. 记 >》, Tn 一 g(N). 那么 显然 
和 二 六 十 1 
有 jim g(N)=0 且 
> b, < roun; 二 TiUnj;-l1 十 "十 TNUnjy-N 十 OUV) AI. 


n=0 
令 j 一 oo0, 我 们 推 得 > bn 么 (ro 十 … 十 FFN)A 二 SUN) Ah. 


n= 二 0 
现在 , 当 N 一 oo 时 取 极 限 , 得 到 


oa co 5S. bn 
>》 bn Sh rn 或 /> 2 (2.6) 
人 一 0 nn 二 0 7 

n=0 


但 由 式 (2.5) 和 式 (2.6) 结合 则 有 疡 > 入 . 另 一 方面 , 由 定义 有 < A 入 .于 是 j= 入 这 
就 意味 着 lim un 存在 有 昌 它 的 值 是 

3 

lim wu, = 2 


1 一 oo 
2 mr 


n=0 
对 于 al = 0 且 使 am > 0 的 所 有 m 的 最 大 公约 数 为 1 的 情况 , 可 借助 第 2 章 
推论 4.1 和 上 述 方法 完成 定理 的 证 明 . 


3.3 吸收 概率 
前 面 我 们 已 经 证 明了 (第 2 章 问 题 6): 若 ; 是 瞬 态 , 则 P3 一 0; 若 i,j 是 属于 
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同一 非 周期 常 返 类 , 则 PS -mi > 0, 如 果 i,; 属于 同一 周期 常 返 类 , 则 用 n-!1 3》、 Pm 
m= 二 1 

代替 上 述 的 Pi, 相同 的 结论 也 成 立 . 为 了 完成 Py 极限 性 质 的 讨论 , 下 面 考虑 i 是 
瞬 态 而 j 为 常 返 状态 的 情况 . 

如 果 工 是 所 有 瞬 态 的 集合 , 我 们 考虑 

ZX = 》 P; 乏 ]17 EL， 
ET 

并 归纳 定义 / 
Ty 一 >》, Pyr?,， nn 之 2,1€ET. 

jeT 

注意 , z? 正好 是 从 状态 i 出 发 经 过 n 步 转移 其 状态 仍然 属于 人 的 概率 . 由 于 
T? < 1 对 所 有 nn 之 1 成 立 (因为 它们 都 是 概率 ), 我 们 通过 归纳 法 可 以 证 明 zy 作为 n 
的 函数 是 单调 不 增 的 . 事实 上 ， 


: 一 >》 Piz} < >_P; = 1. 
jET 7ET 
现在 我 们 假设 对 所 有 7 e T,z? < zm-1, 我 们 有 
0 < zt 一 >》 Pijrs < >», Piyr?™ 一 Zi . 
jel ET 
因此 , z? | zi, 即 z? 递减 趋向 于 某 个 极限 zi, 并 且 ， 
Ti 一 2》, 人 E14. (3.1) 
JET 

由 此 推 得 , 如 果 上 述 方程 组 唯一 的 有 界 解 是 零 向 量 (0,0,…), 则 从 任何 瞬 态 出 
发 被 吸收 到 某 常 返 类 将 以 概率 1 发 生 . 事实 上 , 显而易见 x;(i e T) 是 从 状态 i 出 
发 一 直 未 被 常 返 类 吸收 的 概率 . 因为 这 个 序列 是 式 (3.1) 的 有 界 解 , 由 此 可 知 对 所 有 


2 Ti 一 0. 
附注 3.1 如果 一 个 马尔 可 夫 链 仅 有 有 限 个 ( 设 为 M) 状态 , 则 不 存在 零 常 返 
状态 , 并 且 不 是 所 有 状态 都 是 瞬 态 . 事实 上 , 既然 》、 Pr = 1 对 所 有 n 成 立 , 因此 


7=0 
不 可 能 对 所 有 六 lim Ps3 = 0 都 成 立 . 
限制 于 常 返 类 , 相同 的 论证 也 说 明 不 存在 零 状态 . 令 C, C1,C2,… 表示 常 返 类 . 
我 们 定义 mi(C) 为 从 瞬 态 i 出 发 而 最 后 被 常 返 类 C 吸收 的 概率 . (注意 , 一 旦 过 程 进 
入 某 一 常 返 类 , 它 就 不 会 再 离开 这 一 类 了 .) 
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设 站 (C) 表示 从 初始 状态 i(i E T) 出 发 经 过 n 步 转移 之 后 第 一 次 进入 C 从 而 
被 C 吸收 的 概率 , 那么 


ri(C) = Sr(C) <1, (3.2) 
n= 二 1 

Tr; (C ) 一 2》 Fij;, 
JEC 


a?(C)= > Pr (C) 2. 


ET 


(3.3) 


利用 式 (3.3), 式 (3.2) 重 写 为 


mi(C)= Mm(C) + >_ nr(C) 


=m(C)+ 2 VD Psr? (CO) 


n=2 jET 
= (C0) + 2 Ps 2 ,7 (0), 
JET n= 二 2 
mi(C)=r(C) + > Pr(O),ieT. (3.4) 

EL 

假设 齐 次 方程 组 
wi= 》 Pw;, iET 
ET 
唯一 的 有 界 解 是 零 向 量 , 则 {xi(C)} 是 方程 组 (3.4) 的 唯一 有 界 解 . 此 外 , 或 者 对 某 些 
i ET 了,Ai(C) > 0, 或 者 对 每 个 ie Txi(C) = 0, 因此 对 于 所 有 的 n 都 有 7?(C) = 0 
定理 3.1 设 ieC(C 非 周期 常 运 类 ). 则 对 于 ie TT 我们 有 


im _ Pi; = mi(C) im Pi 一 Tai(C)TD7 
证 明 显然 7?(C) = 》 (CO), 其 中 7 纹 (C) 表示 从 状态 i 出 发 经 过 n 步 转 
大 EC 


移 被 吸收 到 类 C 中 并 且 处 于 状态 & 的 概率 . 我 们 有 
mi(C) = > 》 tO) 和 1 
Ul kKEC 
所 以 对 任意 s > 0, 存在 有 限 多 个 状态 的 类 C' C C 及 整数 N(e) = N, 使 得 当 n > N 
时 , 成 立 


Ti(C)— 2 2 tH(C)| <e 


u=1 keEC’ 
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即 
Vom Se (3.5) 
u=1 keEC u=l1 keEC' 
(这 里 , r 和 (C) 简 记 为 吉 .) 
对 于 7 e C, 考虑 


72 
++ 让 
PY — >, 2 hn 


Lu=1 kKkEO! 


把 事件 按照 第 一 次 进入 C 中 的 某 状态 的 时 间 进 行 分 解 , 然后 使 用 通常 的 递 推 方 法 ， 
我 们 得 到 


nn 
P= _ mmPe ,ieT,jed. 


u=l] kKkECO 
综 上 所 述 , 我 们 有 
1 
本 (> >。 必 ) 了 
u=l1 keEC! 
nn La 
= (P+ 2 
u=] kECO’ u=l] KEC ,EEO 
N 
< | Dr (Py"-) 
u=1 KEC! 
+ 1 
+ T(t DT rp 
u=N+1 keC’ u=1 kEC, kg OO 


但 如 果 C 是 非 周期 的 且 ke C0', 则 Per*<1， 
因此 存在 NW' > N, 使 得 当 m”> N' 时 


FP; 一 (> >》_ | ny 


UU=l KEC! 


PR 一 可 二 2 lim Pi. = 7;. 
ke 了 | 一 且 lim 大 7 了 


PR 一 可 | <e(k EO 所 以 当 n>N' 时 


Th 
E22 >》 DE > Nik 


uu 二 N+li kEC' UU=l hkEC, kGEC! 


然而 , 由 N 和 C 的 选择 使 我 们 确信 右 妆 < 4e. 借助 于 式 (3.5) 和 上 述 结果 , 我 们 得 
到 


LE — ma(C)y| < 4 十 ET n>N, 
所 以 


im Pi = mi(C)ny. 及 
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如 果 C 是 周期 的 并 且 7 e C, 类 似 方 法 可 用 于 证 明 
lim = 3 Pr = mi(C)ny. 
m=1 
我 们 强调 , 如 果 i 是 瞬 态 , j 是 带 返 状态 , 则 Ps 的 极限 既 取 决 于 i 也 取决 于 j. 


这 和 i,; 都 属于 常 运 类 的 情形 形成 鲜明 的 对 比 . 
例 (具有 nn 十 1 个 状态 的 赌 徒 输 光 模型 ) 


我 们 要 计算 wi = mti(Co) 和 vi = zi(Cn), 即 过 程 从 状态 i 出 发 最 后 分 别 进入 吸收 (所 
以 是 常 返 的 ) 状态 0 和 的 概率 . 方程 组 (3.4) 变 为 


ui 三 4 十 pu2, 
Wi = ul1+DPuitl, 2<&1<SN—2, (3.6) 
Un—1 = dUn—2, 
这 是 有 n 一 1 个 未 知 数 的 mn 一 1 个 非 齐 次 方程 组 . 设 解 的 形式 是 w = z", 代入 (3.6) 
中 同方 程 , 约 去 公 因 子 , 得 
px? 二 gg 三 区 . 

此 方程 存在 两 个 解 : xz = 1 和 z= g/p. 因此 , w = 4+B(g/p) ,r=1,2,.…,n—1, 
满足 式 (3.6) 中 间 方 程 , 其 中 4, B 为 任意 常数 . 现在 我 们 确定 A 和 B 使 其 满足 第 
一 个 和 最 后 一 个 方程 . (者 9 =p, 则 z= 1 是 px? 十 g = Zz 的 双重 根 , 这 时 需 用 > 代 
替 (g/p)".) 在 g 冯 pb 的 情况 下 , 我 们 得 到 条 件 


A+ BL =q+p(A+BS) 
有 n—l n—2 
0) 
化 简 为 


_93 
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友 
pA+t+g B=0. 
求 此 方程 组 的 解 ,得 | 
A=— B = 一 一 一 
gm 一 Dmn gm 一 Dr 
代入 ur 的 表达 式 jy 
_ \4/p} 一 人 9/ 
tr 一 (g/p)™ —1 ) 在 了 4. 
如 果 9 = p, 我 们 类 似 可 得 4 一 1,B = -二 , 于 是 
Ur 一 一 -， 者 p = 4. 
nn 
用 类 似 方法 可 得 
vi 二 1 一 Li 


这 正 是 我 们 所 要 的 结果 , 因为 一 定 被 类 Co 和 Cn 之 一 吸收 是 显然 
考虑 对 手 拥有 无 限 财富 的 赌 徒 输 光 模型 . 赌 徒 输 光 (吸收 到 0) 的 概率 满足 方程 


Ul = 4+ Pus, 


(3.7) 
Wi 二 qui-1 十 PUi+1， 1 之 2. 


我 们 同样 求 得 
ui=A+B(g/p), gq@#p 
和 
如 一 4+Bi (g=p=1/2). 
如 末 gq > p, 则 由 w; 有 界 知 B = 0, 由 式 (3.7) 的 第 一 个 方程 求 得 wi = 1. 如 果 g < yp， 
我 们 可 求 得 wu; = (q/p) . 事实 上 , 由 有 限 状 态 赌 徒 输 光 模 型 通过 简单 的 极限 过 渡 , 得 
1 = g/p, 由 此 易 推 出 wi = (gq/p)'. 


3.4 弟 返 性 准则 


我 们 证 明 两 个 定理 , 它们 对 判断 马尔 可 夫 链 的 常 返 性 或 瞬时 性 是 很 实用 的 , 然 
后 应 用 这 两 个 定理 研究 几 个 例子 . 

定理 4.1 设 一 个 不 可 约 的 马尔 可 夫 链 第 的 状态 空间 为 非 负 整数 集 . 则 争 是 
瞬时 的 ( 即 每 个 状态 是 瞬时 的 ) 充分 必要 条 件 为 方程 组 


OO 
,Pisy; =Yi, iz 直 0, (4.1) 
j=0 
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存在 非常 数 有 界 解 
证 明 设 第 的 转移 矩阵 为 
Po Py ... 
P=|RBl=| Po Pr .i 
与 其 相 联系 的 新 转移 矩阵 为 
1 0 0 
Pp |B,|= Fo Fi 2 (4.2) 


Po Po Foo 


我 们 用 第 来 表示 由 转移 矩阵 (4.2) 决定 的 马尔 可 夫 链 , 它 把 原来 马尔 可 夫 链 的 状态 
“0” 改 为 吸收 状态 而 其 他 状态 的 转移 概率 并 不 改变 . 
为 证 必要 性 , 我 们 将 假设 过 程 第 是 瞬时 的 , 然后 找 出 方程 组 (4.1) 的 非常 数 有 
界 解 
令 向 表示 已 知 初始 状态 i. 经 过 有 限 步 之 后 终于 达到 状态 0 的 概率 . 由 于 过 
程 第 是 瞬时 的 , 则 对 某 个 了 夭 0 有 jj < 1 否则 状态 0 为 常 返 的 . (为 证 明 这 一 
点 , 应 当 记 住 在 不 可 约 马尔 可 夫 链 中 所 有 状态 或 同时 是 常 返 的 , 或 同时 是 非常 返 的 .) 
对 于 过 程 第 ， 显然 对 某 些 j 大 0 和 (Co) = 1 L 币 (Coa = jj < 1 县 对 所 有 ， 成 
立 , 元 (Co) = Bro) ). 因此 元 (C60) = 5S PTj(Co) 对 于 i 关 0 成 立 , 这 样 ， 
二 0 


=0 j= 
yi = TA; co- 二 0,1,2,.…) 就 是 所 要 求 的 非常 数 有 界 解 . 
现在 , 我 们 假设 方程 组 (4.1) 存在 有 界 解 {y;}, 则 


>_ Py 一 Yi， ;之 0， 
j=0 
通过 迭代 , 我 们 得 到 , 对 所 有 的 i > 0 和 所 有 的 n>z1， 
>_ Pny; = Yi. 
j=0 
如 果 链 是 常 壕 的 , 则 
im n PR = 一 |， 


因此 


>》 Pay; < M(1 ~ PS) 一 0， 当 n 一 oo 时 ， 
j#0 
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这 里 M 是 {y;} 的 上 界 . 因此 


Yi 一 >_P Pisyi + Pyo 下 Yo. 
#0 
因此 , 对 于 所 有 的 i,yi = yo, 即 {gi} 是 常数 列 . 
定理 4.2 一 个 不 可 约 马尔 可 夫 链 为 常 返 的 充分 条 件 是 存在 一 个 序列 {vy;} 使 
得 


OO 
DPyy; Sy i#0 有 yo%. (4.3) 
j=0 


证 明 利用 前 一 定理 证 明 中 的 相 辣 记号 , 我 们 有 


OO 
Py; 乏 %， 对 所 有 1， 


j=0 


因为 z= yi 十 b 满足 (4.3), 我 们 可 假设 对 所 有 的 i 之 0,yi > 0. 欠 代 前 面 的 不 等 式 ， 
我 们 有 


M—1 oo 
Pi yj 十 > Py; < Ys) 
7 二 0 7=M 
所 以 
Mi 
Piry; + mipn {yr} } 和 名 < 
j=0 i 二 M 
因为 
2 P?=1 
7 二 0 
所 以 我 们 有 
M—1 MM-1 
Pry y; 十 min {y,} ( 一 | < Yi 
j=0 和 j=0 
正如 前 面 定 理 证 明 中 所 看 到 的 ， 


im n Ps 二 人 0， 对 于 7 冯 0. 


Pi 
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这 样 , 当 mm 一 co 时 取 极 限 , 我 们 得 到 对 固定 的 i 
ii(Co)yo 十 min{yr}(1 — fi(C0)) < y; 


或 


1 — Aii(Co0) < < ir ii(Co)yo) 和 eK, 


mipt 
其 中 
K = yi — Ni(Co)yo. 


由 = 的 任意 性 , 和 元 (Coy < 1, 我 们 有 元 (Co) = 1 对 每 个 i 成 立 , 这 就 证 明了 原 过 程 
是 常 返 的 . 上 


3.5 ”一 个 排队 例子 
现在 我 们 来 讨论 2.2 节 例 C 的 排队 模型. 其 转移 矩阵 县 


其 中 , as >0 且 》 ar=1. 


k=0 
(实际 上 , 在 随后 的 分 析 中 ， 我 们 仅仅 用 到 性 质 0<ao<1 和 ao 十 ol < 1， 它们 
保证 了 该 马尔 可 夫 链 是 不 可 约 的 .) 如 果 Ska > 1, 我 们 证 明 方程 组 ,Pow - = 


k=0 
yi,i 天 0, 在 在 一 个 非常 数 有 界 解 , 于 是 由 定理 4.1 即 可 断 音 该 过 程 是 瞬时 的 令 
yi 二 引 , 上 述 方程 组 取 如 下 形式 


De = = > Qjit1€ 一 二 


7 二 +1 一] 


或 
2》, Qj_iti€ +! = 《= )》 artr = f(€), (#0). 
j=i—1 k=0 
于 是 , f(0) =ao >0 且 f( D) = or=l 因此 , 车 f(1) = 》 kak > 1, 则 存在 一 个 


此 一 人 


6o0< 如 < 1 使 /to) = 0. 这 由 图 3-1 容易 得 到 . 向 量 W = 总 ,] = 0,1,2,… 正 是 


i 
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所 要 的 有 界 解 , 且 显 然 是 非常 数 解 . 如 果 》 kak < 1 则 应 用 定理 4.2, 其 中 y; = 也 
如 果 i 关 0, 我 们 有 


OO OO 
,Py = >》, Qj—it1) 
7 一 0 7 一 :一 


一 > Qj-it1i(j —i+1)+i—l1 
1 二 1 一 1 
二 kaxr—1+i 
k=0 
< 2. 
因此 , 如 果 》 kak < 1, 则 该 过 程 是 常 返 的 . 
G(e) 


图 3-1 


为 了 和 弄 清 过 程 外 究 况 是 零 常 返还 是 正常 返 , 我 们 先 来 讨论 下 面具 有 某 种 单独 
重要 性 的 辅助 问题 


设 及 1) X22 表示 取 值 于 {~1,0, 1, 2,: } 的 独立 同 分 布 随机 变量 序列 ， 且 
Pr{X; =k}=b, k=-1,0,1,2,..., b_1>0, 
并 设 Sn 二 站 1 十 了 Xs 十 … 十 Xn. 令 2Z 是 使 Sn 第 一 个 变 为 负 值 的 n 和 值 , 假定 


Pr{iZ=k}=Yyk, k=1,2,3,.... (5.1) 
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今 
U(s) = >》 Ts (7o=0) (5.2) 


表示 (5.1) 的 母 函数 . 若 TA? = + Sn(r 是 一 个 非 负 整数 ), 令 2(") 是 一 个 随机 
变量 , 其 值 等 于 使 TA < 0 的 第 一 个 n 值 ， 由 于 每 个 X; > -1 我 们 容易 验证 
2Z(") = Zi 十 2Z2 十 … 十 Zrti, 这 里 Zi 是 以 (5.1) 为 分 布 的 独立 同 分 布 . 显然 ， Fr) 的 
母 函数 是 [U(s)]"+1. 令 y+0 表示 U(s)"+1 中 sm 的 系数 . 

最 后 , 记 


b_ 
G(s) = +bo thst bs 十 


我 们 的 目的 是 利用 G(s) 确定 U(s). 为 此 先 来 推导 通常 的 更 新 关系 式 : 


Y= 0-1,， Yk = byyet k > 2. (5.3) 
一 < 


上 述 关系 式 中 第 一 个 是 显然 的 . 至 于 第 二 个 , 事件 {5% > 0,n = 1,…,k-1; 5 = 一 1} 
是 不 相交 事件 族 {Xi = 六 Xo2 十 十 X 二 707 =2 一 1 十 十 和 十 了 一 
-1},5 = 0,1,… 的 并 , 它 的 概率 显然 等 于 bjy0+1, 因为 X; 是 独立 同 分 布 的 . 利用 
全 概率 公式 立即 导出 (5.3). 由 (5.3) 过 渡 到 母 函数 , 我 们 有 


U{s) = b.18 + 3 相 or 5 


n=2 \ j=0 


=b-1s+s > by [过 ier) 


7 一 0 ==2 


= b_1s+s >》 pi[C7(s)+ 


j=0 
= b-18+ sU(s) ce) 一 坷 | 对 于 0<s<l 
= sU(s)G(U(s)). 
由 于 U(s) 是 连续 的 且 当 3 € [0,1 时 是 严格 增 的 , 同时 U(0) = 0. 因此 , 对 于 
0 < s < 1,0(s) 满足 G(U(s)) = ~. 但 是 对 于 s > 0， 


G (5) = 十 252 十 6535 十 125482 十 > 0, 


所 以 G(s) 是 凸 函数 , 由 G(s) 的 定义 推 得 lim G(s) = +oo 和 G(1) = 1. 看 一 看 下 面 
图 形 (图 3-2 和 图 3-3) 便 知 方程 G(z) = = 对 于 每 个 se [0,1] 至 多 有 两 个 正解. 由 
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于 lim U(s)=0 和 U(s) 在 [0， | 上 是 严格 增 的 , 我 们 可 以 看 出 , 如 果 Te) = < 存在 
两 个 解 , 则 U(s) 必 是 G(x) = - - 的 两 个 解 中 较 小 的 一 个 . 
我 们 现在 研究 在 什么 条 件 下 有 y =1 或 < 1. 可 能 出 现下 面 两 种 情况 : 
天 一 人 


情况 1: G'(D > 0.G'(1) > 0 等 价 于 6-1 < 》, nbn, 而 图 3-2 显然 说 明 U(1) = 


1 二 0 


》 Yk = fo0 < 1 所 以 事件 {5% > 0 对 于 所 有 的 n} 的 概率 是 严格 正 的 . 


k=0 


G(s) 


图 3-2 图 3-3 


情况 2，G'(1) < 0.G'(D < 0 等 价 于 b_1 > 》、nbw, 而 这 时 我 们 有 Dm = 


和 
U( = 1. 因为 对 于 0 < s < 1,G'(U(s)U'(s) = - 广 故 在 这 种 情况 下 当 s 一 工时 
U(s) 一 工 见 图 3-3). 这 毕 遂 着 :如果 G' (1) < 0, 即 如 果 


D_1 > 3 nb,,, 


nn 二 0 
则 
E(2) = y nn = ID = 


nn 二 0 


F< 


如 采 G'(1) = 0, 即 如 采 
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ce 
b-1 一 》 nbn,, 


n=0 
则 员 
E(2)= 》 ny = UV"(1)= 0%. 
二 0 
现在 我 们 再 回 到 排队 过 程 , 设 ax = bx-_i, 且 令 2i; = 从 状态 i 出 发 第 一 次 到 达 
状态 7 < i 所 需 时 间 长 度 (转移 次 数 ). 稍 加 思考 便 可 发 现 , Zi,i-1 正 是 上 述 的 随机 变 
量 Z, 其 母 函 数 U(s) 已 确定 . 由 于 


人》 ui 一 1 

t 一 0 
我 们 有 

= > 并 f+ (« > | 
nn 二 0 n=0 
+ 一 | ] > y、 oj ， 
n= 二 0 

类 似 地 有 


| 
全 一 (< 三 


n=0 
cc 
《一 一 ( 一 >》 mor) . 
人 一 0 


因此 ， 如 果 Snan < 二. 则 | E(Zii-1) = HH < O00, 如 果 >》 nan 二 1 则 E(Zii_1) 一 


二 0 


n= 二 0 
/= oo. 由 于 一 次 只 人 允许 向 后 移动 一 步 ( 即 过 程 此 时 是 “持续 ”的 ), 我 们 有 
Lij = Liiit Li1i-2+ + Lit1,j;7 < %, 


因此 E(2i;) = (i 一 上 4 特别 地 有 EE(2i,0) = iy 

现在 让 我 们 考虑 状态 0 的 平均 返回 时 间 . 首先 注意 到 返回 时 间 等 于 1 的 概率 
恰 是 ao( 即 转移 概率 Poo). 此 外 , 从 0 出 发 经 过 两 步 或 多 步 转移 第 一 次 回 到 0 的 样 
本 函数 可 按照 发 生 第 一 次 转移 所 到 达 的 状态 i 进行 分 组 . 这 样 一 组 的 平均 返回 时 间 
正好 等 于 1 加 上 从 状态 i 到达 状态 0 所 需要 的 平均 时 间 . 这 样 的 分 解 结合 马尔 可 夫 
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性 , 导出 了 下 面 平 均 坊 回 时 间 的 表达 式 : 


》_nf%% = E( 返 回 时 间 ) 


nn 二 0 


OO OD 
=a0+ ,ailE(Zi0) +1]=1+) oiB(Zi0) 


i 二 1 ?一 


OO OO 
=1+) ipai=1+pY tai 
it 二 1 i=0 


这 样 , 寿 4 < o%%, 即 >》 iai <1, 则 


1 二 0 
101 >》 mj 的 < oo; 
n= 二 0 
且 , 阁 =o%， 即 》 iai = 1, 则 
i=0 
nf 
n=0 


综 上 所 述 , 我 们 有 


na， <1 二 正常 二 ， 


n= 二 0 


» nan 二 1 沪 零 第 起 ， 
二 0 


以 及 、 
>》_ nan >1 池 有 瞬 态 . 


二 0 


这 些 结论 比较 直观 . 表达 式 》、 na 是 顾客 在 一 个 服务 周期 内 平均 到 达 数 . 这 样 , 如 


1 二 0 


果 》 nan > 1, 那么 在 平均 的 意义 上 说 , 每 个 周期 内 到 达 的 人 数 比 受 服务 的 人 要 多 ， 


nn 二 0 


因此 我 们 可 以 料 定 等 修 队伍 的 长 度 将 超出 任何 界限 . 另 一 方面 , 如 果 》 nan < 1， 
n=0 


过 程 的 状态 渐 趋 稳定 . 然而 平稳 分 布 的 计算 是 相当 复杂 的 ( 见 第 18 章 ). 
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3.6 “已 一 个 排队 模型 


过 程 的 状态 是 等 候 队 伍 的 长 度 , 在 每 个 单位 时 间 里 有 一 个 人 到 达 , 如 果 等 候 队 
伍 至 少 有 上 大 个人, 则 有 个 人 被 服务 的 概率 为 ok > 0,k = 0,1,2,…… 容易 计算 转 
移 概 举 矩阵 为 ~ 

>》 ai ao 0 0 
t 二 1] 


OO 
》oi a ao 0 


Pl = | 二 2 


i 2 Qt: Uo 
% 二 3 
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我 们 证 明 , 如 果 》 kak > 1, 于 是 过 程 是 正常 返 的 , 则 存在 一 个 平稳 分 布 . 平稳 分 布 


k=0 
存在 的 原因 是 : 受到 服务 的 顾客 的 平均 数 是 ) kak > 1 而 同时 只 有 一 个 新 顾客 到 
达 . 
考虑 方程 >》 6 一 音 今 二 = 台 , 则 
i=0 


》 ai 和 1 一 £7, 对 于 7 之 l; 


1 一 1 一 1 


妈 
>》, EItig +1 =6, 
?一 7 一 上 
通过 变量 替换 化 简 为 


>》 art* =&€. 
k=0 


如 来 E(0 < & < 1) 满足 这 些 方 程 , 则 对 了 = 0 我 们 有 


i=0 \k=i+1 
= > >》 cake (重新 安排 和 的 顺序 ) 
天 一 上 i1=0 
1. 准确 地 说 应 是 , 当 等 候 队 伍 愉 有 大 人 时 , 则 恰 有 i(i < 类) 人 被 服务 的 概率 为 ai, 而 大 人 被 服务 的 概 
率 为 >》, Qi. 译 者 注 
二 此 
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= 和 EL-o-(《G-oo)=1 


所 以 方程 对 于 了 = 0 同样 也 满足 ， 
我 们 考虑 f(€) = >》 ak 由 于 f(0) = ao > 0 且 f(1) = 1, 如 果 f'(1) = 


k=0 


2_,kak > 1 则 存在 多 满足 0 < 0 <1 上 且 f(&0) = 如 ( 见 图 3-4). 所 以 T= (1 一 0) 多 


k=0 


一 如 


队伍 空 无 一 人 的 概率 为 1 一 &0. 


| 


5 


Jk 


图 3-4 


i 二 0 


方程 组 》 &iPi = &,j 关 0, 等 价 与 方程 组 》 Bijéj = &i,i 关 0, 其 中 Pi; 是 3.5 
j=0 
节 中 矩阵 的 元 素 . 在 》 kok < 1 的 情况 下 , 过 程 P( 如 我 们 已 见 到 的 ) 是 常 返 的 , 因 
大 一 0 
此 后 一 个 方程 组 没有 非常 数 有 界 解 . 因此 , 如 果 并 kak < 1, 方程 组 》 miPi; = 7 


tO 
没有 有 界 解 , 从 而 过 程 不 存在 平稳 分 布 , 于 是 该 过 程 或 者 是 零 党 返 的 , 或 者 是 非 清 椒 
的 . 我 们 现在 证 明 方 程 组 


D2_Piy; =Y, iz#0 (6.1) 
j=0 


有 非常 数 有 界 解 当 且 仅 当 学 kak < 1, 因此 , 当 且 仅 当 对 ka < 1 时 过 程 是 非常 反 
的 , 而 当 》、 kak = 1 时 过 程 一 定 是 零 常 返 的 . 因为 (6.1) 有 一 个 常数 解 , 所 以 我 们 可 


k=0 
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以 令 yo = 0, 于 是 (6.1) 化 简 为 


G2Y0 十 G1Y1 十 0072 = 
Qa3Y0 十 0211 十 Gly2 + 0013 = YY 


和 有 


an+lig 十 anyi t+: 二 T+ GaiYn + QoYn+tl = Yn 


本 人 和 帮 看 二 申 学 者 看 看 晶 在 申 


用 s 一 乘 以 第 ?个 方程 , 然后 求 和 , 并 令 
一 2 ,Yks®, A(s) = >》 ,aks'， 
k= 二 0 


利用 卷 积 公式 , 我 们 得 到 


Y(s)A(s) — saoy: = sY (s) (6.2) 
看 A(s) 关 s, 由 上 式 得 Sao 
Y(s) = A 5 (6.2) 


如 果 A’‘(1 = Dan > 1, 由 于 4(0) = ao, 4(1) = 1, 则 必 存 在 某 个 s,0 <s<1, 使 


a- = 8. 因为 Y(s) 对 于 每 个 s € [0,1] 收敛 , 所 以 Y(s) 没有 有 界 系数 , 从 而 当 
2 kak > 1 时 过 程 是 常 进 的 . 


上 一 0 
如 果 4'() = > kak < 1, 由 4(s) 的 严格 凸 性 , 即 A”(s) > 0, 推 知 对 于 0 < s < 
k=0 
1 均 有 4(s) 关 s( 见 图 3-5). 考虑 情况 kak < 1 
A) -s= (9 | 


= (1—s) a 


k=0 


ol 


=0 + 二 


= (1 一 3 lL - > ( > 四 "| ( 重 排 和 的 顺序 ) 


n 二 0 \i=n+l 


= (1—s)[ll—-W(s), W/(s)= 5 wns" ， 


1 二 0 
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其 中 
Wn 一 >》, a; > 0), 
?二 Tn 十 1 
是 
105 Dm (Do) -De 
nn 二 0 n=0 \i=n+j1 k=0 

故 

5C041 

(9 = we 

= S000 (1 + W(s) + (W(9))? + 

一 800Y1 9) 其 中 U(s) = > Uns” 一 > (s)] ;Un 之 0. 

一 saoyiV (s), 
其 中 

V(s) = ,vns", Un 一 > 如 

于 是 


Ul(s) 


V(s) = rt 


3.7 随机 游 动 95 
由 于 VD) =1+ 殉 (+(G) 十 … 是 收敛 几何 级 数 , 我 们 有 


(W(1) = > kar < 1) 一 vo = uk < "| , 
k=0 

显然 ,v1 < v2 < … 一 0(1), 所 以 , 当 且 仅 当 > kak < 1 时 Y(s) = saoWiY(s) 芋 级 数 
展开 具有 有 界 系 数 . 所 以 , 如 果 5 kak <1, 取 i 关 0,yk = aoyivk-1, 依 方程 (6.2) 
并 令 其 系数 相等 , 我 们 得 到 (6.1) 的 一 个 有 界 非常 数 解 ， 由 此 推 得 该 过 程 是 非常 运 
的 . 如 果 > kax = 1, 则 (6.1) 的 任何 解 一 定 无 界 , 从 而 该 过 程 是 常 返 的 . 综述 如 下 ， 

车 ,kak < 1, 过 程 是 非常 返 的 ; 

若 kak = 1 过程 是 零 常 返 的 ; 

大 > kak > 1, 过 程 是 正常 退 的 . 


3.7 随机 游 动 
我 们 应 用 3.4 节 的 常 返 准则 于 随机 游 动 , 其 转移 矩阵 为 


70 Po 0 0 
dl 7 2 0 


Pl = 
I 0 gq 7a po 
令 
POP1 :Pn—l 
n0=1, nn =. 
did2 dm 


对 于 情况 7; = 0, 我 们 已 证 明 ( 见 3.1 节 例 ) 当 且 仅 当 》 rm < co 时 上 述 随 机 游 动 
n= 二 0 
具有 平稳 分 布 . 现在 我 们 考虑 方程 组 


OO 
2_Piyi =Y, i#0, 
j=0 


giyo 十 门人 十 Piy2 二， 


| 


| 
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通过 检验 表明 其 解 张 成 一 个 二 维 线性 空间 . 我 们 可 以 事先 任意 指定 yo 和 1, 则 所 
有 其 他 yi 可 由 这 些 方程 确定 . yi; 三 1 是 方程 组 的 平 几 解 . 我 们 证 明 , yo = 0, = 


》 -二 ,n> 1 也 是 一 个 解 . 对 于 第 一 个 方程 
二 0 和 宇和 


] 1 di 1 
qiy0o+ni1 二 piy2 三 人 1 一】 十 2 一 十 一 一 = 三 一 三 急 . 
po po P12D0 po 
对 于 第 n 个 方程 , 我 们 必须 证 明 
1 一 2 1 ni—1 1 1 1 n—l ] 
dn 一 一 | 十 个 一 一 十 力 一 一 一 一 一 一 ， 
[二 二 Dai " 2 Di 2 iT 
由 于 Dn 十 Th 十 gn 二 ]， 只 须 验证 下 式 
n—2 nn 1 了 一 工 
qn DO pir + Pn 站 一 (pn + gn) 六 
但 左 疹 正 是 
ni—l 1 1 
n 十 也 ”人 十 3 
(gn +p )2 有 
而 据 开刀 的 定义 ， 
| 一 二 一 
一 入 -一 三 广 一 人 二 一 
Pn—-iNin—l (pn-i/qgn}Rn-i nn 
n—l 
be J 1 和 
107| 即 证 得 结论 ， 由 于 两 个 解 (y; 三 1) 和 (» 一 》， 二 显然 是 独立 的 , 所 以 一 般 解 
i 人 


可 以 表示 为 zn 一 和 十 Cn 并 且 当 且 仅 当 yn 有 界 即 >》 < Oo 时 >》 Pijz; 一 
ro 二 j=0 
zi,i 关 0, 存在 一 个 非常 数 有 和 界 解 . 


所 以 , 我 们 有 
pe = oo -一 第 退 ， 
iO ii 
Dp 一 co 且 2 和 一 oo 一 和 零 常 返 
Dp =oo 是 2_mi < oo 一 正常 返 


OO 


) < oo -一 非常 返 


ti 
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初等 问题 


1. 一 个 矩阵 P = 1P5| 路 =: 称 为 随机 的 , 如 末 
(i) Pi; >0 对 所 有 1,7 = 1,2,.…; 
(i) 》 Pi = 1 对 所 有 i=1,2,…. 


7=1 


一 个 失 阵 P 称 为 双重 随机 的 , 如 果 除 满足 条 件 (i), (i 之 外 , 还 满足 


》 P5=1 对 所 有 j=1,2,…. 


4 盖 ] 


证 明 : 若 一 个 有 限 不 可 约 马尔 可 夫 链 具有 双重 随机 转移 概率 矩阵 ， 则 所 有 平稳 概率 相 


等 . 

2. 状态 空间 为 {0, 1, 2, 3, 4, 5} 的 马尔 可 夫 链 具有 转移 概率 矩阵 
1 2 
a 3 09 0 0 0 0 0 00 
2 1 3 1 
5 5 0000 7 17 000 
0 0 1 3 0 0 0 1 -< 0 0 0 

4 4 8 8 

(a) 1 14 (b)| 1 1 0 1 3 0|; 
005 00 4 了 BB 
1 1 1 1 1 i111i1, 
1 1°9 4144 3 66 3 
i 1 1 1 1 1i 0.0 0 0 0 1 
6 6 6 6 6 6 


试 找 出 所 有 的 类 并 计算 极限 概率 lim Psi(i = 0,1,2,3,4,5). 

3， 考 虑 赌 徒 输 光 模型 ， 其 中 赌 徒 I 的 初始 财富 为 a(a > 10), 赌 徒 II 的 初始 财富 为 
b(b > 10), 设 p 是 赌 徒 1 每 局 从 I 工 赢 得 一 个 单位 财富 的 概率 . 求 赌 徒 I 的 财富 在 减少 到 5 
之 前 达到 a 十 b 一 3 的 概率 . 

4. 设 7, 是 一 均匀 山子 n 次 独立 滚动 后 出 现 的 点 数 之 和 . 求 


jim Pr{Yn 是 13 的 信 数 }. 
5. 考虑 一 马尔 可 夫 链 , 其 转移 矩阵 


bo 2 D2 pm 
pm po PD Drm—-1 
pi Pp2 23 po 
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其 中 0<po<1 且 po 十 pi 十 … 十 pm = 1 试 确定 其 平稳 分 布 Jim Pi;. 


6.， 设 某 群 体 上 共有 无 限 多 成 员 ， 其 成 员 对 某 疾病 或 具 免 疫 力 或 易 感 染 ， 令 Xn 表示 第 
n 段 时 间 该 群体 中 易 感 染 此 病 的 成 员 数 目 , 并 假设 Xo = 0 且 在 该 疾病 不 流行 的 情况 下 有 
Xn+l = Xn 十 1. 这 样 , 在 此 疾病 不 发 生 的 情况 下 群体 中 易 感 染 者 的 数目 随时 间 增 加 可 能 是 
由 于 个 体 失去 免疫 力 , 或 者 是 一 个 新 的 易 感 染 者 进入 该 群体 引起 的 . 

但 在 每 段 时 间 内 都 存在 发 生 此 传染 病 的 可 能 性 , 发 生 概率 为 未 知 常数 p. 当 疾 病 出 现时 ， 
所 有 易 感 染 者 都 患 此 病 , 此 病 不 致命 且 产 生 免 疫 力 , 所 以 者 了 是 疾病 出 现 的 首次 时 间 ， 则 
Xr = 0. 

试 计算 (X) 的 平稳 分 布 . 

7. 一 个 飞机 票 预定 系统 由 两 台 计 算 机 组 成 , 在 任 一 时 刻 都 只 有 一 台 计 算 机 在 工作 , 且 
在 任 一 天 计算 机 失灵 的 概率 为 p. 有 一 套 维修 设备 , 需要 两 天 时 间 才 能 使 失灵 的 计算 机 修复 . 
此 维修 设备 一 次 只 能 修理 一 台 计 算 机 ， 取 数 对 (x,y) 作为 过 程 的 状态 , 其 中 , xz 是 在 一 天 未 
可 以 运转 的 计算 机 台数 , 经 过 一 天 修理 尚未 修复 失灵 计算 机 时 , y = 1, 其 余 情 况 , y = 0. 此 
时 构成 状态 空间 为 数 对 和 集 的 马尔 可 夫 链 , 其 转移 概率 矩阵 为 ; 


到 达 状 态 >(2,0) (1,0) (1,1) (0,1) 


出 发 状态 
(2, 0) q p 0 0 
p= (1:0) 0 0 q 也 
(1, 1) go Dp 0 0 
(0, 1) 0 1 0 0 


其 中 p+g = 1. 试 利用 p 和 9 求 过 程 的 平稳 分 布 . 

8. 考虑 一 生产 线 , 其 中 每 个 产品 是 废品 的 概率 为 p. 假设 每 个 产品 的 情况 (废品 或 正品 ) 
与 其 他 产品 的 情况 无 关 . 现 使 用 以 下 的 抽样 方法 : 

开始 时 抽取 生产 的 每 个 产品 , 直到 连续 取 到 i 个 正品 , 然后 从 每 7 个 产品 中 随机 抽取 一 
个 , 直到 发 现 一 个 废品 , 当 此 情况 发 生 后 , 又 恢复 原来 方法 抽取 生产 出 来 的 每 个 产品 , 直到 出 
现 连 续 i 个 正品 为 止 , 等 等 . 

状态 Ex(k = 0,1,.…,) 表示 在 100% 抽样 阶段 发 现 大 个 连续 正品 , 而 状态 Bi+! 表示 
在 第 二 阶段 抽样 中 ( 即 从 > 个 产品 中 抽取 一 个 ) 至 少 有 一 个 正品 被 抽取 ， (我们 把 第 m 次 观 
测 看 作 时 刻 m.) 则 状态 序列 是 一 个 马尔 可 夫 链 ,其 转移 概率 为 


Pix = Pr{ 第 m + 1 次 观测 后 处 于 状态 Ek| 在 第 m 次 观测 后 处 于 状态 EE;} 
| p 车 k=0,7=0,4…bi 十 1 


ri 
J 


1--p 车 k=7 二 17=0,14…, 纪 或 k=j 了 =i 十 1. 
0 其 他 . 


时 
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对 于 所 有 m. 

(a) 试 确定 平稳 分 布 . 

(b) 试 确定 长 远 之 后 检验 过 的 产品 所 占 的 比例 . 

(c) 试 确定 平均 消耗 量 (4OQ@), 即 在 长 远 之 后 抽样 产品 中 废品 所 占 的 比例 . 

9. 社会 学 家 常 假 设 在 一 个 家 庭 中 相继 各 代 的 社会 等 级 可 看 作 一 个 马尔 可 夫 链 . 这样， 
儿子 的 职业 仅 与 其 父亲 的 职业 有 关 而 与 祖父 无 关 . 假如 这 样 的 模型 是 适当 的 , 并 且 转 移 概 率 
甜 阵 由 下 面 给 出 : 


儿 子 的 等 级 
低 中 高 


低 040 0.50 0.10 


注 毛 只 淋 必 


高 ”0.05 0.50 0.45 


对 这 样 一 个 群体 , 长 远 之 后 处 于 中 间 等 级 的 人 所 占 比例 是 多 少 ? 

10. 假如 任意 一 天 的 天 气 与 前 两 天 的 天 气 有 关 , 准确 地 说 , 如 果 今 天 和 昨天 都 是 晴天 ， 
明天 将 以 概率 0.8 为 睛 天 ; 如 果 今 天 是 晴天 而 昨天 是 阴 天 , 则 明天 将 以 概率 0.6 为 晴天 ; 如 果 
今天 是 阴 天 而 昨天 是 睛 天, 则 明天 将 以 概率 0.4 为 晴天 ; 如 果 今 天 和 昨天 均 为 阴 天 , 则 明天 [110 
以 概率 0.1 为 晴天 . 

倘 者 我 们 认为 任 一 时 刻 的 状态 由 当天 和 前 一 天 的 天 气 情况 所 确定 ,上述 模型 可 转化 为 
马尔 可 夫 链 . 我 们 说 过 程 处 于 

状态 (s,s)， 如 果 昨 天 和 今天 晴天 ， 
状态 (s,c)， 如 果 昨 天 晴 而 今天 阴 ， 
状态 (c, s)， 如 果 昨 天 阴 而 今天 晴 ， 
状态 (c, c)， 如 果 昨 天 和 今天 都 是 阴 天 . 
则 转移 概率 矩阵 是 
今天 的 状态 
(s,s) (s,c) (cs) (co 
(s,s) |‖ 0.8 0.2 
(8, Cc) 0.4 0.6 
(c, s) 0.6 0.4 


氏 沪 只 州 王 


(c, c) 0.1 0.9 
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(a) 求 出 马尔 可 夫 链 的 平稳 分 布 

(b) 长 远 之 后 , 晴天 所 占 比 例 为 多 少 ? 

11. 考虑 一 正 2r + 1 边 形 , 其 顶点 为 V, V2,… ,V2r+t1. 设 在 每 一 点 Vi 上 有 非 负 质量 
wk, 且 Wi 十 和 2 十 … 十 ww 如 +1 = 二 现在 每 点 Vi 上 置 以 新 质量 wi, 它 是 相 邻 两 点 旧 质 量 的 
代数 平均 , 即 


1 
wk 一 7 (Wk + Wk+1). 


如 此 类 似 地 做 ”次 变换 . 试 确定 lim wk. 

答案 ;1/(2r 十 1), 与 到 无关 . 

12. 假设 几 离 散 单位 测量 的 灯泡 寿命 是 随机 变量 X, 分 布 律 为 Pr{X = k} = px,(%k = 
1, 2,…). 奇 从 新 灯泡 开始 , 当 其 损坏 时 立即 换 上 新 的 灯泡 , 至 时 刻 ”为 止 被 替换 灯泡 数 的 期 
望 值 记 为 wx, 则 wn 满足 方程 


nn 
un = Fx (n) + 》_ pkink, n= 1,2,.…, 
太一 上 


其 中 Fx(n) = px. 


kgn 
在 一 座 大 楼 中 , 出 于 经 济 原因 , 通常 一 次 替换 所 有 灯泡 (已 损坏 或 没有 损坏 的 ) 比 单独 将 
换 一 个 灯泡 更 加 便宜 : 所 渭 “ 整 批 替 换 策略 ?是 由 周期 N 所 确定 , 它 要 求 在 时 间 0, 1,… ,NN 一 
1 期 间 替 换 已 损坏 的 灯泡 , 随后 在 时 间 N 替换 所 有 的 灯泡 (已 损坏 的 和 未 损坏 的 ). 若 Ci 是 
整 批 将 换 中 每 个 灯泡 所 需 费用 ， C2 是 损坏 替换 中 每 个 灯泡 所 需 费用 , 可 以 证 明 , 采取 这 样 策 
略 长 远 之 后 , 每 个 灯泡 每 次 替换 平均 费用 为 [C1 + C2un-1]/N, 即 一 个 替换 周期 平均 费用 除 
以 周期 时 间 长 度 . (这 个 结果 的 证 明 见 第 五 章 ). 
(a) 由 直观 注意 到 , 至 时 刻 n 为 止 平均 更 新 次 数 wn 不 收敛 而 无 限 变 大 . 关于 un 的 更 
新 方程 不 满足 定理 1.1 中 的 什么 条 件 ? 
(b) 试 导出 关于 vn 的 更 新 方程 , 这 里 ww = Pr{ 在 时 刻 n 需要 一 次 替换 }, 因而 ww = 
Un 一 Un-1,n = 1,2,.…, (uo = 0). 
(0) 若 pi = 0.4,pz = 0.3,ps = 0.2, 而 pa = 0.1, 对 于 n = 1,2,…,10, 计算 ww 和 
tn 三 1 十 V2 十 :十 Vn. 
(qd) 着 Ci = 1 元 , C2 = 2 元 , 试 计算 N 为 何 值 时 费用 最 小 ? 
答 业 : (bj vn = pn 十 DY pn—kvk vo = po = 0. 
k=1 
(cj v1 = 0.4000 v2 = 0.4600 
va 二 0.5040 v4 = 0.5196 
vs = 0.4910 ve = 0.4991 
v7 一 0.5013 vg = 0.5005 
v9g = 0.4994 v10 = 0.5002 
(dy N* = 2. 


i 


日 题 
1. 考虑 下 面 随机 游 动 : 
Fiitl = 2， 0<p<l1, 
Fii-1=94=1—Dy, =1,2,.……,7r—1, 
Fo=P.r=1. 
求 d(k) = EE[ 吸收 至 状态 0 或 7 的 时 间 | 初始 状态 为 ]. 
和 k (q/p)* 
1l—(g/p 1 
jd 人 = 一 -一 一 ， 
(K) q—p gqg~p 1—(g/p)" 有 p73 
1 
=k(r 一 天) 蔡 Dp 二 9 


2. 设 己 = | 已 外 是 不 可 约 马尔 可 夫 链 转移 概率 矩阵 且 PP 是 宕 等 的 ( 即 P? = PP). 证 
明 , 对 于 所 有 和 了 有 Fi; = Pi;j, 且 此 马尔 可 夫 链 是 非 周 期 的 . 


提示 ， 对 平均 值 -= 》、P 利用 定理 1.2 


m= 二 1 

3. 考虑 状态 空间 为 {0, 1, 2,…, N} 且 转 移 概率 矩阵 为 PP = 1Piy 上 No 的 有 限 马尔 可 
夫 链 喘 , 设 其 状态 分 为 三 个 等 价 类 : {0}, {1,2,…,N 一 1}, {NN}, 且 0 入 是 吸收 状态 ， 
均 可 由 状态 = 1,2,…,N 一 1 达到 , 而 {1,2,…, NN 一 1} 为 瞬 态 类 ， 令 状态 大 满足 
0 <k < N. 我 们 定义 一 称 为 “回复 过 程 ” 的 辅助 过 程 顺 , 其 转移 概率 矩阵 是 把 | 已;| 中 第 
一 行 和 最 后 一 行 改变 为 Po,k = Py,k = 1, 而 其 他 行 不 变 . 此 回复 过 程 显 然 不 可 约 . 试 证 明 ， 
过 程 入 从 初始 状态 出 发 至 吸收 状态 的 时 间 期 望 wk 等 于 二 -其 中 mo 十 mr 
是 过 程 拨 处 于 状态 0 或 N 的 平稳 概率 . 

提示 : 利用 状态 的 平稳 概率 与 平均 返回 时 间 之 间 的 关系 . 

4. 考虑 状态 为 0, 1,… ,NN 的 离散 时 间 马 尔 可 夫 链 , 其 转移 概率 为 


Hi) 7 三 ?一 | 
Ni， 一 二 1 
Fi; = | ' 2 7 二 0,1,.…,N. 
1 一 Ai 一同， Jj 三 ?， 
0, 7 一 >1. 


假设 jo = 和 0 = LN = 和 AN = 0 且 所 有 其 他 ji 和 入; 均 为 正 的 , 过 程 初始 状态 是 有. 试 确 
定 0 和 NN 的 吸收 概率 . 


、 HiH2 "i 
答案 = 1， pi= 一 一人; 
娄 : 定义 po 2 人 六 


Pr{ 吸 收 至 0} = 1 一 Pr{ 吸 收 至 N} 
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N-1 
>》 pi 
4 一 天 
N-1 
和》 Di 
+ 二 0 

5. 在 问题 4 的 条 件 下 , 试 确定 平均 吸收 时 间 . 


mi jm 0< 2,7<N, 


1 一 e—22i/N 


Ta a > 0. 


注意 , 此 时 0 和 入 是 吸收 状态 .试验 证 exp( 一 2aX) 是 一 个 摧 (或 等 价 地 , 证 明 恒等式 


Elexp(—2aXtt1)|Xt] = exp( 一 2aXt)), 其 中 Xi 是 时 刻 i(t = 0, 1,2,…….) 的 状态 . 利用 此 
性 质证 明 , 从 状态 出 发 被 状态 入 吸收 的 概率 Pn (k) 为 
1 _ e—2ak 


提示 : 利用 在 有 限时 间 内 必定 出 现状 态 被 0 或 N 吸收 的 事实 以 及 关系 式 (试验 证 之 ) 
Elexp(—2aXo0)| = Elexp(—2aX,,)| 


Pn(k) = 


= Pn(k) exp(—2aN) 十 (一 Pn (k)). 


7. 考虑 一 有 限 群 体 (所 含 个 体 总 数 固定 为 NN), 其 个 体 或 为 4 型 或 为 a 型 . 设 在 时 刻 
til < t2 < ts < …, 菜 个 体 死 亡 目 被 男 一 个 体 (4 或 a 型 ) 所 代替 . 若 在 时 刻 如 替换 前 
存在 j 个 4 型 个 体 和 NN 一 7 个 a 型 个 体 , 假设 其 中 一 个 4 型 个 体 死亡 概率 是 jy/B;， 
一 个 a 型 个 体 死亡 概率 是 (N 一 了 jv2/Bj;, 这 里 五 = Hp17 十 J2(NN 一 卜 . 这 个 模型 基于 如 
下 想法 : 一 般 地 , 一 个 4 型 个 体 在 时 刻 如 死亡 的 可 能 性 为 jn /(j1 十 12), 而 一 个 a 型 个 
体 在 时 刻 如 死亡 的 可 能 性 为 Hz/ (pt 十 Hz) (p41/p2 可 解释 为 4 型 相对 于 a 型 的 选择 优 
势 ). 考虑 到 群体 的 大 小 , 我 们 指定 替换 4 型 个 体 的 概率 为 jj1/B; 替换 a 型 个 体 的 概率 为 
Li2(N 一 了/B; 是 合理 的 . 至 于 出 生 , 我 们 假设 4 型 和 a 型 并 无 不 同 , 因此 新 个 体 为 4 型 
的 概率 是 7/N, 新 个 体 为 a 型 的 概率 为 (NN 一 j)/N. 考虑 马尔 可 夫 链 {Xn},， 其 中 Xn 是 
在 时 刻 如 (nm = 1 2 … 4 型 个 体 数 ， 其 转移 概率 为 


Pj = HAN —)) 


z p,,, — Lt2(N -i 


BN 
Pi=1-—PjAi—Pstl Pj;=0 当 ki-j|> 1 时 . 


试 求 当初 始 状 态 为 个 4 型 、N 一 上 个 a 型 时 , 此 群体 最 后 全 部 变 为 a 型 的 概率 . 
提示 : 说 明确 定 吸 收 概率 的 方程 可 以 归结 为 赌 什 输 光 随机 游 动 的 吸收 概率 所 对 应 的 方 
程 组 . 


答案 : 
Pr{ 最 后 全 部 为 a 型 } 
_ (p/p2)” ~ (p1/p2)" 
一 (JR T Ha 天 No2， 
k 
=1— Ni Hi 二 MH2. 


8. 设 忆 是 3x3 马尔 可 夫 和 矩阵 并 定义 K(P) = ax Pi 一 忆 ,,j]. 试 证 明 1(P)=1 
当 目 仅 当 PP 具有 形式 
1 0 0 
0 p 4 (p,q >0,p+qg=1;7,s,t>20,r+s+t=1) 
r 8 + 
或 由 该 第 阵 通 过 调换 任意 两 行 ( 列 ) 而 得 到 的 矩阵 . 
9， 如果 忆 是 有 限 马 尔 可 夫 矩 阵 , 我 们 定义 j(P) = max (Pi 一 Ps). 设 Py 


P2,…, Px 是 3 x 3 的 不 可 约 非 周期 马尔 可 夫 链 的 转移 矩阵 ， 进 一 步 假设 对 于 任意 整数 
合 ai(l < os < 上),i = 1,2,…,m,]] Pc 也 是 一 个 非 周 期 不 可 约 马尔 可 夫 链 的 矩阵 . 


和 一 


1 
试 证 明 , 对 于 任 给 & > 0, 存在 一 个 M(e), 使 得 当 m > M 时 , 对 任何 集合 ai(1 < ai < 


k),i = 1,2,.…,m, 有 
9 
及 (Te <E. 
t=1 


10. 如 果 i 是 常 返 状态 且 Xk 表示 马尔 可 夫 链 在 时 刻 上 的 状态 , 试 证 明 
Jim Pr{Xk#i 对 于 n+l<k <n+N|xo = 计 =0. 


如 果 i 是 正常 返 状态 , 试 证 明 上 述 收敛 性 关于 n 是 一 致 的 

*11. 广义 波 里 亚 铅 方 案 ， 在 一 名 里 有 a 个 白 球 和 6 个 黑 球 , 我 们 从 中 随机 抽取 一 球 
如 果 抽 到 一 个 白 球 , 把 它 放 回 并 添加 a 个 白 球 和 6 个 黑 球 到 镶 里 ， 如 果 抽 到 一 个 黑 球 , 也 
把 它 放 回 并 添加 Y 个 白 球 和 6 个 黑 球 到 镶 中 . 此 处 , a 十 8 = YY 十 6. 重复 此 过 程 . 设 Xn 是 
前 n 次 抽取 中 抽 到 白 球 的 次 数 

Q) 如 果 Pk = Pr{Xn = 上} 和 pn(z) = 》, Pn,kz*. 试 证 明 恒等式 

kk 二 0 

{zi(n—1)y+al+b+ (nn — 1)6} 


(a — 7Y) (7 一 也) / 
nt(Z) 一 ( pn—1(7) 十 (n 1)(a + pA) +a+b pn-1(7). 


nl)(a+i+B8)+t+at+ 


| 
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(ii) 证 明 当 nn 一 oo 时 成 并 (Xn/n) 一 了 ALO 十 放 、 
提示 : 证 明 


2 (]) 4 十 (一 1)7 
ee 


并 由 此 导出 pn( 了 /一 7/ 十 从 
“12. 在 问题 11 的 条 件 下 证 明 : 当 n 一 co 时 成 立 


和 2 y 2 
(人 | (225) 
提示 : 仿照 上 题 (i). 确定 关于 wn( 的 递 推 关 系 . 
*13. 在 问题 11 的 条 件 下 证 明 : 当 n 一 oo 时 , Xn/n 依 概率 收敛 于 y/(B 十 7)， 
*14. 考虑 一 具有 有 限 状 态 {1,2,.…, N} 的 不 可 约 马尔 可 夫 链 . 设 1Piy| 是 此 马尔 可 
夫 链 的 转移 概率 矩阵 ， 并 用 {zy} 表示 过 程 的 平稳 分 布 ,|P" | 表示 m 步 转 移 概率 矩阵 . 
令 p(z) 是 zy>0 的 四 函数 , 定义 


lim 五 


TOO 


N 
= mp(P8")， 1 国定 
J=1 


试 证 明 Em 是 m 的 不 减 函 数 , 即 对 所 有 mm 之 1 有 Em+i > Em. 


返回 时 间 , 它们 是 独立 同 分 布 的 随机 变量 , 具有 有 限 均 值 和 母 函 数 F(t) = 》 ttPr{Wi = 
天 一 1 
上 }(|t| < 1). 令 7 表示 在 时 刻 m 之 前 最 后 到 达 状态 0 的 时 间 . 证 明 


no prry SA lr 
> ry > Pr 四 = 


提示 : 证 明 并 利用 关系 式 
Pr{ yn 一 7} 一 Pr{V 十 .…… 十 WH, 一 7}. dn—j; 


其 中 9 = Pr{Wi > 外, Nn 表示 在 时 刻 n 之 前 到 达 状 态 0 的 次 数 . 
16. 固定 一 递减 非 负 数 序列 , 1 = bo > bi 之 …, 考虑 具有 如 下 转移 概率 的 马尔 可 夫 


链 : ) 
产 (8 一 Bit+1), 着 7 也 % 
Fi; = 车 j =i 十 1 


0， 其 他 ， 
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其 中 bn, = bn/(bi + :+ bn). 证 明 Poo 一 1/on, 其 中 On 一 D 十 … 十 D. 这 样 ， 该 链 为 
非常 返 的 , 当 且 仅 当 > 了 < O00. 
附 i 记 


3.1~3.4 节 论 及 研究 马尔 可 夫 链 的 重要 工具 , 大 部 分 有 关 马 尔 可 夫 链 的 专 着 都 
包含 这 一 内 容 . 
3.5 节 的 例子 在 随机 排队 模型 中 是 经 典 的 . 详细 叙述 可 参考 Takacs[1]. 


参考 书目 


由 L.Takacs, Introduction to the Theory of Queues. Oxford Univ. Press, London and New 
York, 1962. 
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第 4 章 ”连续 时 间 马 尔 可 夫 链 的 古典 例子 


泊 松 过 程 和 生 灭 过 程 在 诸如 排队 模型 、 存 储 模 型 、 人 口 增长 及 工程 系统 等 理论 
和 应 用 中 起 着 重要 作用 . 本 章 内 容 在 每 一 本 入 门 教程 里 均 有 介绍 


4.1 一般 纯 生 过 程 和 间 松 过 往 


前 几 章 研究 了 离散 时 间 马 尔 可 夫 链 的 基本 概念 和 方法 . 在 这 一 章 里 我 们 将 对 
连续 时 间 离 散 状 态 的 马 氏 过 程 几 个 重要 例子 进行 简要 讨论 . 

特别 地 , 我 们 这 里 所 处 理 的 随机 变量 族 {X(t) :0 < t < o0} 中 的 X(t) 只 能 取 
非 负 整数 值 . 我 们 将 限制 在 {X(t)} 是 一 个 具有 平稳 转移 概率 的 马 氏 过 程 的 情形 . 这 
样 , 对 任意 上 > 0, 转移 概率 函数 


Pij;(t) = Pr{X(t+4) = IX(u) = 让， 2,7 = 0,1,2,..,， (1.1) 


与 wu 之 0 无 关 . 

在 研究 由 某 些 物理 现象 引出 的 特殊 随机 模型 过 程 中 , 比较 自然 的 是 先 确定 所 谓 
过 程 的 无 限 小 概率 , 然后 由 此 导出 转移 概率 函数 的 显 式 表 达 式 . 

下 面 我 们 将 由 hh 较 小 时 Pij(h) 的 表达 式 出 发 , 利用 马尔 可 夫 性 质 , 导出 对 任意 
t > 0, Pij(t) 所 满足 的 微分 方程 组 . 这 个 方程 组 的 解 在 适当 边界 条 件 下 给 出 Pj(t) 的 
表达 式 . 1.2 节 所 介绍 的 泊 松 过 程 事 实 上 正 是 按照 这 个 观点 来 处 理 的 . 

为 了 导出 一 般 纯 生 过 程 , 我 们 简单 回顾 一 下 刻 划 泊 松 过 程 的 公理 . 


A. 泊 松 过 程 的 公理 

1.2 节 已 经 证 明了 泊 松 过 程 可 以 由 一 些 简单 的 公理 所 确定 . 为 定义 相似 类 型 的 
更 一 般 过 程 , 我 们 指出 泊 松 过 程 所 拥有 的 许多 进一步 的 性 质 . 特别 地 , 它 是 一 个 状态 
为 非 负 整数 的 马尔 可 夫 过 程 , 旦 具有 如 下 性 质 : 

(i) Pr{X(t+h)— X(t =1X(t)=7}= Mh+o(h) hl0 (r= 0,1,2,...). 
此 关系 式 等 价 于 


lim 
h—0+ 


符号 oh) 意 指 lim, olh)/h = 0. 注意 上 式 右边 部 分 与 = 无 关 


Pr{X(t+h)— X(t)=1X0)=7} 、 
A 
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(i) Pr{X(E+h) -XH =0X0) =7}=1- M+o(h) hl0. 

(iii) X(0) = 0. 

这 些 性 质 由 直接 计算 即 可 验证 , 因为 所 有 有 关 的 概率 表达 式 均 是 可 求 的 . 
B. 浊 松 过 程 的 例子 


(a) 用 作 说 明 泊 松 过 程 的 一 个 例子 是 钓鱼 的 例子 . 设 随机 变量 X(t) 表示 在 时 间 
段 [0,4] 内 钓 到 鱼 的 数目 . 假设 鱼 的 数量 非常 多 , 热衷 于 此 道 者 钓 到 鱼 的 机 会 并 不 比 
新 手 多 , 而 且 某 一 个 时 刻 来 抢 饵 的 鱼 的 数目 与 任何 其 他 时 刻 一 样 多 . 在 这 些 “ 理 想 
化 ”条 件 下 , 过 程 {X 的 > 0} 可 以 看 作 是 一 个 泊 松 过 程 . 这 个 例子 符合 马尔 可 夫 
性 (所 到 鱼 的 机 会 不 依赖 于 已 捉 到 鱼 的 数目 ) 和 “等 候 无 优惠 ”性 , 后 者 是 泊 松 过 程 
特有 的 性 质 . 这 意味 着 刚刚 来 钓鱼 的 人 和 和 放 乌 待 鱼 呆 了 四 个 小 时 而 没有 成 功 的 垂钓 
者 在 往 后 的 时 间 内 钧 到 鱼 的 机 会 是 均等 的 . 

(b) 一 个 比较 实际 的 例子 是 由 计数 理论 中 提出 来 的 . 如 果 X(t) 是 在 时 间 区 间 
[0, 引 内 由 一 个 Geiger 计数 器 探测 出 的 放射 性 原子 训 变 的 数目 . 只 要 该 物质 的 半 衰 
期 比 时 间 t 大 很 多 , 则 该 过 程 就 是 一 个 泊 松 过 程 . 这 个 规定 保证 了 任 一 单位 时 间 豪 
变 的 机 会 关于 时 间 是 一 个 常数 . 

(c) 泪 松 过 程 目 然 地 出 现在 许多 排队 模型 中 . 在 这 些 例子 中 , 人 们 往往 更 加 注意 
那些 使 X(t)( 表 示 在 时 刻 + 的 队伍 长 度 ) 产生 跳跃 的 时 刻 , 而 不 是 天 (办 本 身 的 取 值 . 
当然 , 钓鱼 的 例子 (a) 就 是 一 个 等 候 时 间 的 典型 例子 . 


C. 纯 生 过 程 


泊 松 过 程 的 一 个 自然 推广 是 允许 一 个 事件 在 给 定时 刻 发 生 的 机 会 依赖 于 已 发 
生 的 事件 数目 . 这 种 现象 的 一 个 例子 是 生物 群体 的 增殖 ( 纯 生 过 程 的 名 称 即 源 于 此 )， 
在 一 定 的 条 件 下 , 例如 有 足够 的 食物 , 没有 大 量 死 亡 , 没有 向 外 迁移 等 , 给 定时 刻 增 
殖 一 个 新 成 员 的 概率 与 群体 当时 的 数量 成 正比 . 这 个 例子 就 是 著名 的 Yule 过 程 . 

考虑 一 列 正 数 {Xk}, 我 们 定义 纯 生 过 程 为 满足 如 下 条 件 的 马 氏 过 程 : 

(i) Pr{ X(t+h)— X(t = 1X() = k} = Mh+ oc(h), (h — 0+), 

(ii) Pr{ X(t+h)— X(t) =0X(t) =k} =1—- Mh + or(h), 

(iii) Pr{X(t+h)— X(t <OX() = k} =0, (k>0). 

为 了 方便 , 通常 附加 假设 

(iv) X(0) = 0. 

在 这 个 假定 下 , X(t) 不 表示 群体 总 量 , 而 是 表示 在 时 间 区 间 [0,4 内 群体 增殖 数目 . 

注意 i) 和 (i 的 左边 部 分 刚好 分 别 是 Pop4i(h) 和 Pc,k(h)( 由 于 平稳 性 ), 可 以 
Oo1,k(h) 和 02,k(h) 不 依赖 于 

设 区 (0) =0 并 令 P(t) = Pr{X(t) =n}. 
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与 泊 松 过 程 情况 相同 , 可 以 推导 出 当 t>0 时 P(t) 所 满足 的 微分 方程 组 , 即 


P(t) = ~M Pt), 


(1.2) 
P’ (t) 一 —An P(t) 十 Mn_1Pn_1(t), 7 之 1， 
并 伴 有 边界 条 件 
Po(0)=1 和 只 (0)=0， 当 n>0. 
事实 上 , 如 果 hh > 0, n > 1, 则 利用 全 概率 公式 、 马 氏 性 和 假设 (过 ), 我 们 得 
P(t +h)= 3 P(t)Pr{ X(t+h) =n|X(t) = k} 
k=0 
=- » P(t)Pr{ X(t+h) X(t) =n— kX(t) = k} 
k=0 
一 3 PtPr{X(t+h) — X(t) =n -kX(t) = k}. 
k=0 
对 于 上 二 0,1,…,n 一 2, 我 们 有 
Pr{X(t+h)— X(t)=n— kX(t) = k} 
< Pr{X(t+h)— X(t) >2|X(t) = k} 
= ouk(h)+oax(h) 
或 
Pr{X(t+h)— X(t)=n— kX(t) = k} = osnx(h), k=0,...,n—2. 
从 而 
P(t+h)=P,(t)[l — Mh + 02n(h) 
+P_1(t)[An_1h 十 O1n-1 (六 
nn 一 2 
十 >», P(t)osan,k(h) 
kk 二 0 
或 
P(t +h)— P,(t) =P,(t)[—Mh + 02.n(h) 
+P_i(t)[An_1h + on-1(h)| + on(h), (1.3) 


1 一 2 
其 中 on(h) 不 大 于 有 限 和 》_ osn,x(h), 后 者 与 t+ 无关, 因此 极限 jimgon(h)/h 二 0 关 
k=0 
于 t+ 之 0 一 致 成 并 . 


4.1 一 般 纯 生 过 程 和 激 松 过 程 ”109 


用 户 除 (1.3) 式 两 内 , 并 令 h 0, 我 们 导出 关系 式 (1.2). 准确 地 说 , 其 中 左 式 是 
右 导 数 . 然而 , 稍 加 留意 我 们 可 以 导出 对 于 左 导数 也 有 相同 关系 式 . 事实 上 , 从 (1.3) 
我 们 工 刻 可 知 用 区 是 上 的 连续 函数 . 在 (1.3) 中 用 tt 一 hh 代替 然后 用 h 除 之 ,并 
令 hh 140, 我们 即 可 得 到 P(t) 存在 左 导数 并 且 满 足 方程 (1.2). 

由 (1.2) 的 第 一 个 方程 立刻 可 求解 得 


Polt) = exp(~—AMot) > 0. 


以 公 表示 第 上 次 和 第 上 +1 次 增殖 之 间 的 间隔 时 间 , 则 
他 一 ] nn 
P,(t) = Pr{ S Tgte< > 了 
i=0 i=0 


随机 变量 Ti 称 为 两 次 增殖 之 间 的 “等 候 时 间 ”, 并 且 


k 一 1 
Sk = 》, T= 第 k 次 增殖 发 生 的 时 间 . 
1 二 0 
我 们 已 见 到 古人 = exp( 一 Aot). 因此 ， 
PriTo < z}=1—Pr{X(z) = 0} = 1— exp(—Moz), 


即 , To 具有 以 和 0 为 参数 的 指数 分 布 . 可 以 由 假设 (i)~(iv) 推 得 人 (kg > 0) 也 具有 以 
和 x 为 参数 的 指数 分 布 , 并 且 五 是 相互 独立 的 ( 见 第 工 卷 第 14 章 , 在 那里 将 给 出 这 
个 事实 的 严格 证 明 ). 所 以 , 5， 的 特征 函数 为 


Ak 
和 ~ it 


nl 1.1 
pn(w) = E{exp(iwSn)} = [[ ElexpliwT:)) = TI (1.4) 
k=0 


kk 二 人 0 


在 泊 松 过 程 情形 下 , 对 所 有 的 ,和 = 入 由 (1.4) 我 们 可 知 这 时 5 是 服从 均值 为 
n/ 入 的 7 阶 工 分 布 . 
对 于 指定 的 一 列 和 x > 0, 我 们 可 以 使 用 积分 因子 exp(Aeb 解 (1.2), 得 到 


» 


t 
P(t) = M1 expC-x 上 exp(AkZT) 记 (zjdz， k= 1,2,..- 
0 


显然 , 对 所 有 的 大 有 P(t) 0. 
但 还 有 可 能 使 得 


3 P(t)} <1. 


从 一 人 


| 日 
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为 保证 过 程 是 合理 的 , 尚 要 确定 使 》 P(t) = 1 对 所 有 t 宕 0 成 立 的 条 件 . 我 们 必 
?他 一 总 
须 按照 下 面 关 系 式 限制 入: 


OO OO 1 
2 Pad) =1 <>》 元 =oo (1.5) 


这 个 结论 在 Feller 的 书 中 已 证 明 ! ， 这 里 从 略 . 关于 此 结果 直观 的 论证 可 撤 
述 如 下 : 相 邻 的 两 次 增殖 之 间 的 时 间 Ti 已 证 明 是 具有 参数 为 Xk 的 指数 分 布 , 所 
以 》_,1/Mn, 等 于 群体 总 量变 为 无 限 之 前 的 期 望 时 间 ， 另 一 方面 , 1 > P(t) 是 


XUi) = oo 的 概率 
假若 》 Xi < co, 则 群体 总 量变 为 无 限 的 期 望 时 间 是 有 限 的 ， 因 而 对 所 有 
t > 0, (二 oo 的 概率 为 正 的 似乎 有 理 . 


D. Yule 过 程 


Yule 过 程 是 纯 生 过 程 的 一 个 例子 , 它 是 从 物理 学 和 生物 学 中 提出 来 的 . 假设 在 
一 个 群体 中 每 个 成 员 在 长 度 为 h 的 时 间 区 间 内 增殖 一 个 新 的 成 员 的 概率 为 Bh 十 
o(h)(6 > 0). 此 外 , 设 在 时 刻 t= 0 存在 X(0) = NN 个 成 员 , 并 假定 群体 成 员 之 间 相 
互 独立 , 不 存在 相互 作用 . 由 二 项 定理 得 


nn 二 0 


Pr{ X(t+h)— XH =1X(0) =n} 
一 9) [Bh + o(h)][i — Bh + o(h)]®T = nBh + on(h), 
即 , 在 这 个 例子 中 Xs = n8. 方程 组 (1.2) 当 N = 工时 成 为 
P(t) = -BInP,(t) — (1 ~ 1)P,_1(t)), Nn 二 1,2,... 


2 


其 初始 条 件 为 
Pi(0) = 1, P,(0) = 0, n = 2,3,.…, 


它 的 解 可 直接 验证 是 


P(t) = ent(1 — e Ht)!l n>1, 


l. W .Feller, An Introduction to Probability Theory and [is Applications, Vol.1, 2nd ed. p.406. 


Wiley, New York, 1957. 
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通过 求 几何 级 数 之 和 , 易 得 其 母 图 数 为 
f(s) 一 >》, P(t)s” 
九 一 ] 


DO 


-8 
on—Bt oPtyun— 1 se 
= Se 》 [((1 ~ e 一 )sl” = 1 eps 


t 


nn 二 1] 


现在 我 们 回 到 一 般 情况 , 设 在 时 刻 0 有 成 员 X(0) = N 个 . 由 于 假定 各 成 员 彼 
此 独立 而 没有 相互 作用 , 我 们 可 以 把 这 个 总 数 看 为 NN 个 独立 Yule 过 程 的 和 , 其 中 
每 一 个 过 程 在 开始 时 刻 只 有 单独 一 个 成 员 . 如 果 我 们 令 


Pyn(t) = Pr{X(t) =n|X(0) = N} 


和 和 CN 
fn(s) = 》 Pvn(bsn， (1.6) 
所 一 入 
使 得 
se 一 Ht N 
fn(s) = [fs 六 = Fe 家 
= (se-Bt)N ~" /m+N-—! | _ eBtym om 
. > ( ae 


0 iy) (eBt)N (1 ~ e-ptjn-Nsn， 
n=N A 


这 里 ,我们 利用 了 二 项 级 数 (1 一- = > ( ”+ 让! )s". 按照 (16), 在 


m=0 和 


这 个 表达 式 中 s" 的 系数 必须 是 Pvwn 伯 , 即 


一 
Pr 的 = (PN)e Ne -er ma=NN+E (Li") 


4.2 ” 当 松 过 程 的 补充 


在 前 一 节 我 们 从 一 组 在 许多 实际 情况 中 都 能 很 好 逼近 的 假设 出 发 导出 了 泊 松 
过 程 . 它 的 分 布点 如 同 有 限 区 间 上 的 均匀 分 布 那样 “随机 地 ” 落 在 无 限 区 间 [0, co) 
上 , 此 过 程 堪 称 为 完全 的 随机 过 程 . 特别 地 , 一 个 观测 值 落 在 某 个 子 区 间 的 概率 仅仅 
是 此 区 间 长 度 的 函数 , 并 且 在 不 相交 时 间 区 间 里 事件 出 现 的 次 数 是 相互 独立 的 随机 
变量 . 

下 面 我 们 更 细微 地 研究 油 松 过 程 . 
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A. 特征 函数 和 等 候 时 间 
泊 松 过 程 中 X(t) 的 特征 函数 为 


e 一 人 (Ab)n eiwn 


nl 


pw) = B{e*0}= 2 


nt 二 0 


= exp[Mt(e'™” — 1) 


于 是 ， 
E(X(t) = MXM, Var(X(t))=X. 


在 纯 生 过 程 的 讨论 中 , 我 们 证 明了 
Pr{To < z} = 1 ~ exp{(—~Aoz), 


并 且 指 出 了 Tx 遵循 参数 为 和 的 指数 分 布 , Ti(k > 0) 是 相互 独立 的 . 然而 , 泊 松 过 
程 对 所 有 上 成立 入 = 入 故 有 

定理 2.1 对 于 泪 松 过 程 , 等 候 时 间 Th 是 独立 同 分 布 的 , 上 且 服从 参数 为 和 的 
指数 分 布 . 

这 个 定理 的 严格 证 明和 将 由 第 14 章 更 一 般 的 结果 导出 . 

泊 松 过 程 的 定义 比 此 定理 成 立 的 条 件 要 求 更 多 一 些 . 我 们 需要 假定 从 任何 时 刻 
开始 至 X(t) 下 一 次 改变 的 时 间 服 从 相同 的 分 布 ， 而 不 必 一 定 以 上 次 改变 为 初始 时 
刻 , 用 数学 式 子 表达 是 


Pr{X(to+t) — X(to) > 0} =1 一 ee 


此 式 已 在 4.1 节 导出 , 这 个 性 质 也 可 以 用 更 加 直接 的 方法 得 到 . 令 F(x) = Pr{X(to+ 
Z) 一 和 (to) > 0}, 其 中 to 是 某 个 时 刻 , 也 可 以 是 一 随机 时 间 仅 依赖 于 至 此 时 刻 为 止 
过 程 的 历史 , 它 的 具体 选择 并 不 影响 此 概率 `. 我 们 有 
F(y+y)= Pr{X(to+7z+y) — X(to) > 0} 
= Pr{X(to +) ~— X(to) > 0}+Pr{X(to+W) — X(to) = 0} 
xPr{X(to+ z+ — X(to+y) >0X(to +y) — X(to) = 0}. 
由 F(x) 的 定义 , 泊 松 过 程 增 量 的 独立 性 以 及 Pr{X(to 十 7) 一 天 (如 ) > 0} 与 to 无关 
(在 沾 松 过 程 定义 中 作为 一 个 假设 ), 我 们 得 到 函数 方程 


F(z+)= Fy) + FF(S). 


事实 上 , 这 个 性 质 所 描述 的 指数 分 布 的 特征 正 是 如 下 定理 的 内 容 : 
1. 这 里 显得 含 烧 不 清 , 我 们 将 在 第 14 章 讨 论 “马尔 可 夫 时 间 ” 概 念 时 给 予 比较 准确 的 解释 . 
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定理 2.2 ”如 果 F(z) 是 一 个 分 布 , F(0) = 0, 且 对 于 某 个 z > 0 成 立 F(z) < 1， 
则 F(z) 为 指数 分 布 的 充分 必要 条 件 是 对 于 所 有 的 zx,y > 0, 成 立 
F(z+9y) — F(y)= F(z)[1 — F(y)]. (*) 


证 明 指数 分 布 应 满足 的 这 个 条 件 可 直接 验证 ， 为 说 明 充 分 性 , 置 G(x) = 
1 一 了 (xz); 则 条 件 (*) 变 为 


G(T+W) = G(T)G(Y) (2.1) 
显然 , G(0) = 1，G(z) 是 不 增 的 , 并且 对 某 个 z > 0，G(z) > 0 假设 对 某 个 zo > 
0，G(zo) = 0. 由 方程 (2.1) 推 得 G(zo) = [G(xzo/n)]* 对 每 个 正 整数 ”成 立 ; 因此 


G(zo/n) = 0. 故 由 (2.1) 知 对 于 zx > zo/n 有 G(z) = 0. 既然 n 是 任意 的 , 因而 对 所 
有 zz>0 有 G(z) = 0, 这 与 假设 矛盾 . 从 而 对 每 个 zx > 0 成立 G(z) > 0. 现 对 任意 
正 整 数 m,n, 从 (2.1) 容易 推出 G(m/n) = [G(1)]™/?. 由 于 G(z) 和 [G(1)]* 和 皆 是 不 
增 郴 数 , 当 z 为 有 理 数 时 二 者 相等 , 且 [G(1)] 是 连续 的 , 我 们 推 得 对 所 有 zx > 0 成 
czi=lGcdj = exp(zlInG(1)). 但 F(z) 是 一 个 分 布 , 故 


lim G(z) =1— lim F(z) =0, 
此 式 比 含 着 G(1) < 1 因此 G(z) = ee, 其 中 
A=—InG(1) >0. 
当 假定 G 是 可 微分 时 , 另 一 种 方法 证 明 如 下 : 显然 (2.1) 到 沁 
G'(z+W) = EG(r+Y) = Go)G(y) 
G(r)G = 元 cz +y) = GG (z+ 
改 
G(x) = aG(z), (2.2) 


其 中 a = G'(yo)/G(yo), yo 为 某 个 使 G(yo) 去 0 的 常 值 . 方程 (2.2) 的 解 为 G(x) = 
4esz. 由 G(0) = 1 一 下 (0) = 1 可 知 A4 = 1. 由 于 对 某 个 x >0 有 G(z) < 1 因此 参 
数 a 是 负 的 . 
B. 均匀 分 布 

与 当 松 过 程 相 联系 的 分 布 不 仅 有 泊 松 分 布 和 指数 分 布 , 还 有 均匀 分 布 和 -一 项 分 
布 . 
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考虑 一 列 时 刻 {5S;}, 在 每 个 时 刻 9:, 人 值 发 生变 化 , 即 
t 一 二 
Si = 》 7. 
k= 二 0 
我 们 有 下 面 结果 
定理 2.3 对 满足 0 < si < s2 区 … <&< sn tt 的 任何 一 组 数 s;, 有 
Pr{S; & si,i= 1,2,...,n|X(t) = n} 
一 有 人 广 dz …… dz1， 


这 是 从 具有 [0,t] 上 均匀 分 布 的 总 体 取 7 个 观测 样本 的 顺序 统计 量 分 布 1. 
证 明 由 定理 2.1 容易 推出 本 定理 结论 . 事实 上 ， 


PriS1 & s1,92 & 32 ,Sn & sn, X(t) = n} 


= Pr{To < s1,T70+ TT < 32… 70 十 十 了 1 乏 sn7T0 十 … 十 Th > 


厂 三 站 站 广 
0 0 0 0 t 一 (t1 十 … 十 tn ) 


An 十 1e 一 A(ti 十 十 tn+t)dt 1 .dt 


31 S82—t] 83—(t1i+t2) sn 一 (ti 十 … 十 ta 一) 
一 A / | / 和 / 
0 0 0 0 


1 oo 
一 Atl 十 … 十 tn ) | 一 二 一 At dt, .dt 
e AN exp( +1) E(t Ht) tn 1 
81 32—t1 ps3—(ti+t2) Sn 一 (ti 十 … 十 tn 1) 
-Ne | / / …| dtn,::. dti. 
0 0 0 0 
若 我 们 引进 新 的 变量 


一 t 十 … 十 如 
Un-i 三 要 十 … 十 机 -1 


ul 一 1, 


\ 31 332 33 Sn, 
Ae ‘| | / -| dz …… du1. 
0 Ul U2 Un—1l 


1. 这 意味 着 对 一 个 有 [0, 妇 上 均匀 分 布 的 随机 变量 进行 n 次 独立 观察 , 令 六 < Y2 < .… < Yn 表示 
这 些 观 察 值 按照 增加 顺序 安排 , 那么 , Yi,Y2,.…… ,Yn 的 联合 分 布 正 是 定理 结论 中 的 表达 式 . 这 个 事 
实证 明 是 十 分 简单 的 , 更 加 复杂 的 讨论 见 第 工 卷 第 13 章 . 


最 后 的 表达 式 变 为 


上 
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人 Ab- 
__ _ 一 人 
Pr{X(t) 一 nl —€ nt 
因此 
Pr{S1 & 8s1, 52 & 82,°**, Sn < sn|X(t)}=n} 
Pr{S1 < 531 … ,On < sn, X(t) 一 7 上 
一 Pr{ X(t) = ny 
1 31 32 Sn 
一 | / “* | du dul 
t™ 0 tl Un—1l 
C. 二 项 分 布 


由 泊 松 过 程 的 性 质 知 , 若 丸 < 上 和 大 < m， 
Pr{X(u) = kX(t) =n} = Pr{X(u) = Ek, X(t)— Xu) =n—k}/Pr{X(t) = n} 


(ewe /kl)le ND — wv) /On 一 大) /nN u(t— uw)"* (2.3) 
et 人 tm 
与 二 项 分 布 有 关 的 第 二 个 例子 可 以 考虑 两 个 独立 泊 松 过 程 XX1(t) 和 X(t), 其 
参数 分 别 是 Xi 和 》X2， 
加 Pr{Xi(t) = k,X2(t) = n—k} 
Pr{X1(t) = kK|X1(t) + X2(t) = n} = Pr{Xit Xt nr 
_ exp(— 和 Ou) /Mlexp(—Xod) Oot)" /(n 一 有 
exp[—(A1 十 Xajti(Ai + Mo)ntr /nl 


的 Gi) (a 
4.3 计数 模型 


下 面 的 问题 是 泊 松 过 程 的 一 个 有 趣 的 应 用 : 具有 随机 振幅 为 X; 的 电子 脉冲 在 
随机 时 间 &( 即 按照 泊 松 过 程 ) 到 达 一 个 探测 器 . 对 于 每 一 个 脉冲 在 时 刻 t 探测 器 的 
输出 是 : 


0 t <t,, 
Xiexp[—a(t —t)] ti 
即 当 脉冲 到 达 时 , 以 振幅 X; 传送 到 探测 器 , 而 其 输出 是 以 指数 率 衰减 . 由 于 探测 器 


是 线性 的 ( 即 可 加 的 ), 所 以 若 在 时 间 区 间 fo, 贡 有 Ni 个 脉冲 出 现 , 则 在 时 间 t 的 输 
出 是 


Xiexpl~a(t — ti)]+ = | 


Nt 
n(t) = 》 Xiexp[—alt — ti)]+. 


i 二} 
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图 4-1 给 出 这 个 过 程 的 一 个 具体 实现 , 我 们 希望 能 知道 m(t) 对 每 个 t 的 分 布 沙 
数 , 或 等 价 地 , 知道 它 的 特征 函数 p(w). 


假设 X 是 独立 同 分 布 且 具有 密度 函数 h(z) 的 正 随机 变量 , 其 特征 函数 为 


vw(s) = 人 esz 太 (zjdz. 


128 R(v;t) = Pr{n(t) < v} = >》, Pr{n(t) & vINi = n}Pr{N: = n}. (3.1) 


n=0 

显然 Pr{Nt = n} = [(Ab"e /nl 其 中 和 是 描述 脉冲 到 达 时 间 的 泊 松 过 程 强 
度 参数 . 由 定理 2.3 知 , 在 条 件 Ni = n, 即时 间 区 间 (0, 内 有 个 脉冲 到 达 的 情况 
下 ,去 好像 是 对 (0,t) 上 均匀 分 布 进行 n 次 观测 所 得 到 顺序 值 . 令 7;(i = 1,2,……，, Ni) 
表示 具有 (0,t) 上 均匀 分 布 的 独立 随机 变量 , 它 若 按 大 小 顺序 安排 , 其 值 即 为 t(j = 

1,2,..-,n). 
现 令 2Z1,…, Zn 是 独立 随机 变量 , 其 分 布 与 X 是 相同 的 , 并 且 与 {7;} 是 独立 

的. 考虑 和 


>》 Ziexpl—alt — 7i)]+4. 
t= 二 1 


我 们 定义 新 的 随机 变量 21,…, 2 如 下 


Ni=2L; T= min(n,,Tm) = 


Z2 二 2; 妆 Tj 是 在 {77} 中 除 右 之 外 最 小 = 刀 


2 一 Gy 当 万 =Imax(T 人) 一 加 


地 
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当 两 个 或 更 多 个 六 相等 时 , 上 面 定 义 不 明 确 , 此 时 无 关 紧 要 , 因为 这 些 事件 发 生 的 
概率 为 0. 那么 ， 


2, Ziexp[—a(t — 7i)]+ = >》 Qi exp[—alt ~ #i)]+, 


?一 二 


因为 这 两 个 和 仅 差 一 个 随机 重 排 . 因为 2; 是 独立 同 分 布 的 , 且 独 立 于 i, 则 容易 证 
明 Zi 是 独立 的 , 它们 的 分 布 与 2; 分 布 相同 , 且 也 与 15 无关. 由 于 独立 于 7;, {2i} 和 
{2i} 显然 也 独立 于 ti. 

因为 2; 具有 XX; 所 需要 的 全 部 性 质 , 所 以 我 们 可 以 取 


n(t) = Zlexpl-alt — ti)]+ = Ziexpl-alt — ni)l+. 
t=] t=1 
今 
Yi(i) = Ziexpl~alt ~ ti)]+; 
一 isy ， 
Oi(s) / eVg(y, k)dy, 


为 Y(k) 的 特征 函数 , 其 中 ge(y,k) 是 Yi(k) 的 密度 沙 数 . 由 于 六 是 (0,t) 上 均匀 分 
布 , 且 7k 和 Zn 是 独立 的 , 我 们 有 


人 qt(u, kdu= Pr{Y(k) < y} 
= Pr{Zx exp[—a(t — Te)]+ < y} 
' du 
一 / Pr{ Zk exp[—alt 一 Tk)]+ < ?| 六 一 Uj} (3.2) 
一 人 Pr{Zxk < yer(t-)} cu 
0 t 
t 
一 / H(ye®(t-*) )dyv, 
其 中 昌 是 对 应 于 密度 h 的 分 布 函 数 . 微分 (3.2) 得 到 
9t(2 k) = / h(ye®(t—) et dy. 


所 以 
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co 1 Go 
0:(s) = / eiY gi(y, k)dy = -= / est / evh(yer(t—))dy )du 
0 tJo 0 


130 = :人 du 三 explis(e— (tz)h(z)dz (进行 变量 替换 ye*(:-* = z) 
t Jo 0 
t 
_ / Wi(se-atecujda (由 少 的 定义 ) 
0 
1 广 一 cv ) 一 上 一 
=- 了 /ye )dv (v =t—) 


由 此 推 得 , 如 有 果 r(x,t) 是 R(z,t) 的 黎 度 函数 , 则 
wz 他) -| er(z,t)dz 


= ( / ewe Pr{n() < zIN = njdzjers 利用 (3.1) 
1 二 0 | 


-De 09” jg,(w)jr (利用 在 已 知 N 值 条 件 下 区 (的 独立 性 


一 7 -Cf wwe-"")dv) 


= exp 一 pf [1 一 y(ue -ldu 直 
关于 w 微分 , 我 们 可 计算 qt) 的 矩 , 例如 
BO 的)= (pe(wlozo = XC-i)w (0) / eovdy 


eot 


= A. E(Xk)- 


4.4 生火 过 程 


4.1 节 所 讨论 纯 生 过 程 的 一 个 月 然 推 广 是 X(t) 除 可 增加 之 外 还 可 减少 , 例如 成 
员 的 死亡 . 这 样 , 如 果 在 时 刻 t 过 程 处 于 状态 n, 经 过 一 个 随机 等 候 时 间 之 后 , 它 可 
131| 以 转移 到 相 邻 的 状态 nn 十 1 或 n 一 1 中 之 一 . 因此 “ 生 灭 过 程 ” 可 以 比拟 为 连续 时 间 
情况 下 的 随机 游 动 (2.2 节 例 B). 
A. 假设 


如 同 纯 生 过 程 的 情况 , 我 们 假定 X(t) 是 状态 为 非 负 整数 的 马尔 可 夫 过 程 , 且 它 
的 转移 概率 是 平稳 的 , 即 


Pij;(t) = Pr{X(t+s) = j|X(s) = i}. 
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不 依赖 于 s. 此 外 , 我 们 假定 Bj(t) 满足 

. Piiti(h) = Nh+o(h) 3 h140,i>0; 

. Pi-i(h)= pih+o(h) 当 h 0,i>1; 
.Pii(h)=1— (M+t+hi)ht+olh) hl0,i>0; 
. Pi;(0) = 6i7; 

. 0 = 0,M0 > 0,p,Ni>0,7=1,2,.... 

在 上 面 每 种 情况 下 , o(h) 可 能 与 i 有关. 矩阵 


CR 


一 和 人 0 A 人 0 0 0 
HL 一 (Al 十 各 A1 0 
和 人 A= 0 M2 —(M2 + 12) A2 和 (4.1) 


0 0 Ha3 一 (As 十 Hp3) 


称 为 过 程 的 无 穷 小 生成 元 . 参数 X 和 ji 分 别 被 称 为 无 穷 小 生 (或 增长 ) 和 灭 (或 消 
万) 的 比率 . 在 假设 1 和 2 中 , 我 们 假定 了 过 程 初始 处 于 状态 i, 则 在 一 个 小 的 时 间 
区 间 内 , 群体 增加 和 减少 实际 上 与 区 间 的 长 度 成 比例 . 有 时 也 人 允许 状态 零 为 吸收 状 
态 ( 见 4.7 节 ). 

由 于 Bij(t) 是 概率 , 我 们 有 Pi;(t) >0 和 


3 P(t} =1 (4.2) 


j=0 


利用 过 程 的 马 氏 性 还 可 导出 切 普 曼 一 科 尔 莫 疙 罗 夫 方程 
Pi(t + s) = >》 Pix(t) Per;(s) (4.3) 
k=0 


这 个 方程 表示 为 了 从 状态 i 经 过 时 间 上 + s 转移 到 状态 j, X(t) 可 经 过 时 间 t 先 转 
移 到 某 个 状态 , 然后 在 余下 时 间 s 再 从 上 转移 到 ;. 在 连续 时 间 情 况 的 这 个 公式 
类 似 于 第 2 章 公 式 (3.2). 

迄今 , 我 们 仅 提 及 转移 概率 Pij(). 为 了 得 到 X(t) = n 的 概率 , 尚 必须 规定 过 
程 从 什么 状态 出 发 , 或 更 一 般 地 , 关于 初始 状态 的 概率 分 布 . 然后 , 我 们 才 有 


Pr{X(t) =n} = > Po 人 
i=0 
其 中 
di 一 Pr{X(0) 一 2}. 
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B. 等 候 时 间 


借助 于 上 述 假设 , 我 们 来 求 随机 变量 TT 的 分 布 , T 是 过 程 X(t) 在 状态 i 的 等 
候 时 间 . 这 里 的 问题 就 是 , 已 知 过 程 处 于 状态 i, 如 何 求 首次 离开 i 的 时 间 工 的 分 


布 ? 令 


由 马尔 可 夫 性 易 推 得 当 疡 40 时 有 
Gilt + h) = Gi(t)Gi(h) = Gi(t) (Pis(h) + o(h)) = Gi(t)[l — Oi + Li)h] + o(h) 
或 
Tt oY + ps)Gi(O) + 00) 
所 以 
Gi(t) = —(Ni + pi)Gi(t). (4.4) 


如 果 我 们 利用 条 件 Gi(0) = 1, 这 个 方程 的 解 是 
Gilt) = expl— (Ni + pi)t], 


由 五 服从 均值 为 Ai + ji) 的 指数 分 布 上 述 提供 的 证 明 不 是 十 分 严格 的 , 因为 
我 们 未 加 证 明 地 利用 了 直观 关系 式 


Gi(h) = Pii(h) + o(h). 


关系 式 (4.4) 的 严格 证 明 将 在 第 2 卷 第 14 童 给 出 . 

按照 假设 1 和 2, 在 长 度 为 h 的 时 间 区 间 内 , 发 生 一 次 转移 使 过 程 从 状态 i 到 
达 状 态 i 二 1 的 概率 为 ih 十 olh), 从 状态 i 到 达 状 态 i 一 1 的 概率 为 yih 十 olh). 由 
直观 可 知 , 知已 知 转移 发 生 在 时 刻 t, 则 转移 到 状态 i+ 1 的 概率 是 入 (1 十 入 )-!, 转 
物 到 状态 i 一 1 的 概率 是 ju(pi + Xi) 一 . 这 个 结果 的 严格 证 明 已 超出 本 书 范围 , 然而 
关于 此 问题 的 解释 及 其 内 在 精细 之 处 将 在 后 面 给 出 (第 2 卷 第 14 章 ). 

和 人 区 的 运动 可 如 下 描述 : 过 程 在 给 定 状 态 i 逼 留 一 段 时 间 , 其 长 度 是 服从 参数 
为 Xi+jai 的 指数 分 布 的 随机 变量 , 然后 离开 状态 i, 并 分 别 以 概率 和 (ji 十 和 i)-! 和 
Hi 人 (十 Xi) 到 达 状 态 i 十 1 或 状态 i 一 1. 这 个 运动 类 似 于 随机 游 动 , 只 不 过 其 转 
移 是 出 现在 随机 时 刻 , 而 不 是 固定 的 周期 时 间 . 

构造 生 灭 过 程 的 传统 方法 是 预先 指定 生 与 灭 的 参数 {A 和 i, 4i}>o, 然后 使 用 上 述 
关于 等 候 时 间 和 到 达 各 状态 的 条 件 转移 概率 建立 轨道 结构 ， 我 们 确定 过 程 的 实现 
可 如 下 进行 . 设 X(0) = 5 粒子 在 状态 i 逗留 一 个 随机 长 度 时 间 (以 和 i ++ ui 为 参 
数 的 指数 分 布 ), 然后 以 概率 和 i/(ji + Xi) 运动 到 ;+ 1 以 概率 ji/(Ai + AH) 运动 
到 一 1， 接着, 粒子 又 在 新 的 状态 逗留 一 个 随机 长 度 时 间 后 转移 到 与 它 相 邻 的 状 
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态 之 一 , 如 此 反复 . 更 具体 地 , 我 们 从 参数 为 (ji + Ni) 的 指数 分 布 中 观测 到 一 个 值 
ti, 这 样 确定 初始 逗留 状态 i 的 时 间 . 然后 我 们 投 据 一 个 硬币 , 它 出 现 正面 的 概率 为 
Pi = Ai/(A 二 由), 如果 正 面 (反面 ) 出 现 , 我 们 把 粒子 移动 到 状态 i 十 1(i 一 1). 在 状 
态 i 十 1, 我 们 从 参数 为 (ji41 十 入 +1) 的 指数 分 布 中 观测 到 一 个 信 to, 以 此 确定 粒子 
在 第 二 个 状态 逗留 的 时 间 . 如 果 粒 子 在 第 一 次 转移 进入 状态 i 一 1, 则 随后 扣留 时 间 
to 是 从 参数 为 (Ai-1 十 ji-1) 的 指数 分 布 中 进行 一 次 观测 得 到 的 . 在 第 二 次 等 候 之 
后 , 如 同 前 面 一 样 , 进行 一 次 二 项 试验 以 选择 下 一 次 所 进入 的 状态 , 等 等 . 
上 述 抽 样 过 程 所 得 到 一 个 典型 结果 决定 了 过 程 的 一 个 实现 . 它 的 形式 是 
1 0<t<H, 
1 十 1 ti<t<ti+t, 
X(t)=411i t+to < 上 < 有 十 起 十 起， 


这 样 , 通过 从 适当 的 指数 分 布 和 二 项 分 布 中 抽样 , 构造 了 过 程 的 一 个 典型 样本 轨道 . 
现在 我 们 有 可 能 以 某 种 方式 规定 这 些 轨 道 (过 程 的 实现 ) 集合 的 概率 测度 , 使 Pi;(t) 
满足 (4.2) 和 (4.3) 以 及 无 穷 小 关系 式 . 这 个 结果 相当 深入 , 它 的 严格 讨论 已 超过 本 
书 讨 论 范 围 , 以 这 种 方式 得 到 的 过 程 称 为 与 矩阵 4 相 联 系 的 极 小 过 程 . 

极 小 过 程 的 上 述 构造 法 是 十 分 重要 的 , 因为 无 穷 小 参数 确定 的 满足 (4.2)、(4.3) 
及 本 书 4. 中 的 假定 的 随机 过 程 不 必 唯 一 . 事实 上 , 可 能 有 几 个 马尔 可 夫 过 程 具 有 
相同 的 无 穷 小 生成 元 . 这 个 问题 比较 复杂 , 我 们 推荐 读者 参看 Chung 的 书 !. 对 于 生 
灭 过 程 这 一 特殊 情况 , 具有 满足 (4.2)、(4.3) 和 无 穷 小 关系 式 的 转移 概率 函数 Pi;(t) 
的 马 民 这 程 三 在 唯一 的 充分 条 什 为 
yx "DH yn 一 00, (4.5) 


n= 二 0 


在 大 多 数 生 守信 于 中 二 他 5) 能 满足 , 因此 与 相应 参数 联系 的 生 灭 过 
程 是 唯一 确定 的 . 


4.5 ” 生 灭 过 程 的 微分 方程 


与 纯 生 过 程 及 沾 松 过 程 情况 类 似 , 转移 概率 Pi;(t) 满足 著名 的 向 后 科 尔 英 戈 罗 
夫 微 分 方程 , 即 


1. K.L. Chung, Markov chains with stationary transition probabilities, Springer- Verlag, Berlin, 
1960. 
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Po,(t) = —N Poj(t) + MoPi;(t), 
Pi(t) = piP1i(t) — Nit pi)Pi(t) + NPris(t), i>1, (5.1) 


上 且 边界 条 件 为 Pi;(0) = 6i;. 
为 了 导出 这 些 式 子 , 由 方程 (4.3) 我 们 有 


Pi(t+h) = Pxr(h) Pes(t) 


天 一 0 
= Pi1(h) P(t) + Pii(h)Piy(t) + Pisri(h) Pr lt) 
+ ik( h) Pe; (£), (5.2) 


其 中 最 后 一 个 和 号 是 对 所 有 开关 1i 一 1,i,i++1 求 和 的 . 利用 4.4 节 假设 1,2 和 3, 我 
们 得 


2 Pix(h) Pes(t) <2, Px(h 


一 _1 — [Pii(h) + Piis_1(h) + Pit1(h) 
=1— [1— Cit pi)ht+o(h) + ih oh) + Nh + oh) 
=0(h), 


所 以 
Pi;(t+ h) = bihPi1,;(t) + (1 — (Ni + pi)h)Pis(t) + MhPir1,;(t) + o(h). 
把 已;(t) 移 到 左边 并 用 h 除 之 , 然后 令 h 140, 得 


Pis(t) = paPi1s(t) — Oi + pi) Pij(t) + NPirs(t). 


以 上 分 析 只 是 第 14 章 向 后 微分 方程 式 推导 的 特例 . 


问 后 方程 是 由 分 解 时 间 区 间 (0,t 十 hh) 为 两 段 区 间 : (0,h) 和 (六 上 + 用, 其 中 四 
为 较 小 的 正 数 , 然后 分 别 检验 在 每 段 区 间 上 的 转移 而 推导 出 来 的 . 

方程 (5.1) 的 特点 是 初始 状态 是 可 以 变化 的 . 

把 时 间 区 间 (0,t 十 hh) 分 为 (0,t) 和 (t,t+h) 两 段 , 并 采用 上 面 分 析 方 法 , 在 更 
加 严格 条 件 之 下 , 我 们 可 导出 另 一 个 微分 方程 组 


Pio(t) = —M Pio(t) + pi Plt), 
Pij(t) = Ny-1P,-1(t) ~ (Ny + py) Piy(t) + py41Pi,s+1(t), ij > 1, (5.3) 


伴 有 相同 的 初始 条 件 Pi;(0) = 6ij. 这 就 是 著名 的 向 前 科 尔 莫 臧 罗 夫 微 分 方程 式 . 为 
此 , 我 们 在 方程 (5.2) 中 调换 上 和 h, 除 满足 假设 1,2 和 3 之 外 在 更 强 的 条 件 下 , 可 
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以 证 明 最 后 一 项 也 是 o( 靖 . 其 余 的 论证 和 前 面 一 样 . 这 些微 分 方程 的 作用 将 在 下 面 
讨论 的 例子 中 显示 出 来 . 

(5.3) 成 立 的 一 个 充分 条 件 是 对 于 尺 关 jj 一 1,， 7 二 1 有 (Pky(h))/h = ol1), 其 
中 o(1) 表示 当 h 一 0 时 趋 于 0, 并 对 固定 的 7 关于 是 一 致 有 界 的 . 在 这 种 情况 下 ， 
容易 证 明 》 ‘Pix(t)Pey(h) = olh). 

k 

在 介绍 下 面 例子 之 前 , 我 们 首先 简要 讨论 Pj(t) 当 t 变 得 足够 大 时 的 性 质 . 可 

以 证 明 下 面 的 极限 
Jim Fi(t) = p; (5.4) 

存在 且 与 初始 状态 i 无关 , 并 且 它 们 满足 


一 Aopo + HID1 = 0， 

MN-1PD;-1 ~ (N+ pi)py + uitiDitl = 0 j>1. 
这 些 方程 相当 于 把 (5.3) 的 左边 部 分 置 为 0. 由 于 2_， Pis(t) = 1 可 断定 2 p; 收 
伍 . 如 果 > pj; 三 1, 则 序列 {py} 称 为 “平稳 分 布 ”, 这 是 因为 p; 也 满足 


(5.5) 


p; = ,piP;;(t), (5.6) 


== 
此 式 告 诉 我 们 , 如 果 过 程 以 概率 p; 从 状态 i 出 发 , 则 在 任意 给 定时 刻 纪 已 将 以 相 同 
的 概率 p; 处 于 状态 i. (5.6) 的 证 明 可 在 (4.3) 和 (5.4) 中 令 tfT oo 且 利用 》 pi < oo 
1 二 0 
得 到 . 由 归纳 法 可 得 到 (5.5) 的 解 . 令 
ON Ni-1 


To = 1，Tj = 一 一 一 一 一 ，7J>1l 
Miu2 所 


则 有 pl = XoHp po = Xipo. 假设 对 于 大 = 1,…,7 有 pi = Arpo, 我 们 有 


Hj+1Di+1 = (Ni + AT7D0 一 入 -177 一 1D0 
= MNTjpo + (HyTy 一 M17;-1)po 
一 Aj7Tjpo, 
最 后 得 Dj+1 三 Tj;+1Po0. 为 了 使 序列 {p;} 是 一 个 分 布 ， 必须 成 立 2,p; 一 1, 车 


Dk < O00, 我 们 有 


Ny , 
Di Snk 了 0, 1, 9 


右 > Tk = 00, 则 必定 有 po = 0, 因而 所 有 p; 都 等 于 0, 此 时 不 存在 极限 平稳 分布 . 
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4.6 ”生火 过 程 的 例子 


例 1 有 迁 和 人 的 线性 增长 ” 生 灭 过 程 称 为 线性 增长 过 程 , 如 果 Xn = Mn 十 a 和 
137| Mn = jn, 其 中 入 > 0,4>0,a>0. 这 样 的 过 程 出 现在 研究 生物 繁殖 和 群体 增长 中 . 
如 果 状 态 n 描述 现在 生物 群体 总 量 , 则 平均 瞬时 增长 率 为 An + a. 类 似 地 , 经 过 一 
小 段 时 间 之 后 过 程 的 状态 减少 1 个 的 概率 是 pnt + olt). 因子 Mn 表示 群体 总 量 由 
当时 状态 所 引起 的 自然 增长 , 而 第 二 个 分 量 a 可 解释 为 由 于 外 来 因素 (如 迁 入 ) 而 
引起 总 量 增长 , 显然 , 分 量 pn 表示 当前 生物 群体 的 平均 无 穷 小 死亡 率 . 
如 果 我 们 把 上 述 和 和 jn 的 值 代入 (5.3), 则 得 到 


Piolt) = ~aPio(t) + uPalt), 
Pi(t) = (MF — 1) +ao)P,i(t) — ((A+p)I + oPi(t)} + p(y + Pi y+1(t),7 2 1. 


我 们 用 ; 乘 以 第 j 个 方程 并 且 求 和 , 推 得 


EIX(t)] = M(t) = > _jP;;(t) 


J 二 1 


满足 微分 方程 
| M'(t) =a+ (A ~ pn) M(t), 
M(0) = 5, 如 果 X(0) = 
这 个 方程 的 解 是 
M(t)=at+i 车 和 和 =k 
且 


M(t) = te 1} ++ie-1Dt 车 和 关上 


其 二 阶 矩 或 方差 可 用 类 似 方法 求 得 . 一 个 有 趣 的 事实 是 若 和 > j, 则 当 t 一 oo 时 
M(t) 一 oo; 而 车 入 < , 则 对 足够 大 的 t 平均 群 体 总 量 近似 于 
1 一 入 
例 2 排队 排队 过 程 是 描述 顾客 们 到 达 某 指定 位 置 并 得 到 某 种 服务 的 一 个 
过 程 . 例如 在 银行 出 纳 员 窗口 或 者 在 超级 市 场 的 缴 款 处 都 会 出 现 这 一 类 现象 . 我 们 
假定 顾客 先后 到 达 的 间隔 时 间 和 对 于 某 个 顾客 提供 服务 的 时 间 服 从 某 些 概率 分 布 
在 给 定时 刻 t 排队 长 度 用 X(b 表示 . 
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在 生 灭 过 程 中 车 对 所 有 i 令 入 = 入 则 此 过 程 即 是 连续 时 间 排 队 过 程 的 简单 情 
况 . 这 时 , 系统 的 状态 是 排队 长 度 , 前 后 两 个 顾客 到 达 的 间隔 时 间 是 服从 参数 为 》 
的 指数 分 布 的 独立 随机 变量 , 为 单个 顾客 服务 的 时 间 服 从 参数 为 un( 依 赖 于 当时 排 
队长 度 ) 的 指数 分 布 . 在 每 次 服务 完成 之 后 , 排队 长 度 减少 1, 并 且 每 个 新 顾客 到 达 
又 使 排队 长 度 增加 1. 具有 单一 服务 的 排队 过 程 古典 情况 对 应 于 py; = 4, i > 1, 即 
每 次 服务 时 间 都 服从 相同 参数 4 的 指数 分 布 , 而 与 排队 长 度 无 关 . 

古典 的 电话 系统 模型 可 以 作为 具有 无 限 多 服务 的 排队 生 灭 过 程 , 每 次 服务 时 间 
的 分 布 有 相同 的 参数 jy, 因此 ji = i4, i 之 1. 此 式 的 依据 如 下 : 假设 队伍 由 i 个 顾 
客 组 成 , 由 于 有 无 限 多 服务 员 , 因此 所 有 顾客 可 以 同时 接受 服务 . 又 因为 每 个 顾客 的 
服务 时 间 长 度 是 相互 独立 的 且 服 从 参数 为 4 的 指数 分 布 ， 由 此 推 得 至 少 有 一 个 顾 
客 完 成 服务 ( 即 排队 长 度 至 少 减 1) 的 时 间 也 是 服从 指数 分 布 的 , 但 其 参数 为 ih( 读 
者 可 证 明 此 事实 ). 

除了 上 述 两 个 特殊 情况 之 外 , 我 们 还 可 以 通过 适当 给 定 参 数 J 来 讨论 许多 其 
他 的 排队 模型 . 例如 , 具有 了 个 服务 , 每 个 服务 时 间 具 有 相同 参数 4 的 指数 分 布 的 
排队 模型 . 此 时 , 当 1<k<n 时 jx = kp 而 当 i>n 时 ji= np. 

对 于 单一 服务 的 排队 过 程 , 知 入 < 1, 其 平稳 分 布 容易 求 得 . 事实 上 , 在 这 种 情 
况 下 有 

m= 1 1 2) 
HI1H2 "Hn 

由 此 推 得 


即 具有 均值 为 和 (jy 一 入 的 几何 分 布 . 
上 式 使 我 们 能 解释 带 有 平稳 性 的 许多 问题 . 看 过 程 已 经 过 很 长 时 间 , 且 入 < 
则 马上 被 服务 的 概率 是 
入 
po = (1 一 ~). 
及 


我 们 还 可 以 求 出 当 和 < jy 情况 下 等 候 时 间 的 平稳 分 布 , 者 一 个 新 来 顾客 发 现 
有 7 个 人 排 在 他 的 前 面 , 他 的 全 部 等 候 时 间 了 是 他 目 己 被 服务 的 时 间 和 他 前 面 的 
人 被 服务 的 时 间 之 和 , 每 个 服务 时 间 都 服从 参数 为 jy 的 指数 分 布 , 并 且 服 务 时 间 与 
排队 长 度 无 关 . 这 样 了 具有 阶 数 为 ni 十 1, 参数 为 上 的 工分 布 


Pr{T < | 有 nn 个 人 在 前 面 } = /和 a" 
由 全 概率 公式 , 我 们 有 
PrfTS 寺 = 5 MPAT<t| 有 n 个 人 在 前 面 }- Gy _ >) 


n=0 


nl na—Hr 
-一 (6.1) 
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因为 A/p)"(1 一 和 /4) 是 在 平稳 情况 下 一 个 顾客 到 达 并 发 现 队伍 前 头 有 ? 个 人 的 概 
率 . 将 (6.1) 代入 , 得 到 


Pr{T < 妇 }= >/ 人 (2) (4-2)dr 


CT 
=/ (Dr 
" 入 

一 / (1 一 “juexp1 一 rp(1 一 ) bar 

一 1—exp| -tp(1 一 ~)] 
这 也 是 一 个 指数 分 布 . 

关于 非 平稳 的 问题 , 其 本 质 是 对 所 有 t 确定 Pi(t). 这 是 一 个 比较 难 的 问题 , 但 

它 已 被 解决 . 阐述 这 个 问题 解决 的 细节 已 超出 本 书目 的 , 我 们 建议 有 兴趣 读者 参阅 


列 在 本 章 末 关于 排队 论 的 任何 一 本 高 级 着 作 . 
对 电话 系统 问题 , 当 和 = 入 和 j = np 时 , 易 见 


eA/ 


人 | 


这 是 熟知 的 均值 为 MA 的 泊 松 分 布 , 如 例 1 一 样 , 容易 验证 


和 


M(t) = > _,jPi(t) 
j=0 


满足 方程 
M'(t) = A— pM(E), 


它 的 解 是 
M(t) = (1 一 et) 二 ie 下， 


车 我 们 令 t 一 co, 则 M(t) 一 和 /pb, 这 是 上 述 给 出 的 平稳 分 布 的 均值 . 

例 3 ” 某 些 遗传 模型 考虑 由 NN 个 个 体 组 成 群体 , 这 些 个 体 或 者 具有 a 型 基 
因 或 者 具有 4 型 基因 . 过 程 X(t) 的 状态 表示 在 时 刻 t 的 a 型 个 体 数 目 . 我 们 假设 
在 时 间 区 间 (t,t 十 hh) 状态 改变 的 概率 是 Ah 十 o(h), 它 与 X(t) 的 值 无 关 , 并 且 在 时 
间 区 间 h 内 出 现 两 个 或 更 多 个 改变 的 概率 是 o(h). 

群体 结构 的 改变 由 如 下 方式 实现 , 一 个 个 体 将 被 从 群体 中 随机 选择 的 男 一 个 所 
代替 ; 即 , 若 X( = j, 则 a 型 被 选择 并 用 以 替换 的 概率 为 j/N, 而 4 型 的 为 1~j/N. 
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我 们 称 这 为 灭 过程 , 而 新 生 个 体 , 按照 下 列 方式 产生 , 从 群体 中 随机 地 选取 一 个 来 决 
定 新 个 体 的 类 型 , 以 此 新 个 体 来 代替 死亡 的 个 体 ， 该 模型 中 引入 了 变异 的 因素 , 恋 
异 使 得 新 个 体 的 类 型 在 出 生 时 可 能 会 相互 变化 . 具体 地 , 令 7 表示 a 型 变异 为 4 
型 的 概率 , 72 表示 4 型 变异 为 a 型 的 概率 . 
这 样 , 加 入 群体 的 新 个 体 属于 a 型 的 概率 是 
Pe 一 全) 十 (1 一 7 )m (6.2) 
我 们 推导 此 公式 如 下 : 我 们 选择 一 个 a 型 且 没 有 发 生变 异 的 概率 是 (7/N)(1 天). 
而 且 , 如 果 我 们 挑选 到 一 个 4 型 的 , 随后 可 能 变异 为 a 型 的 , 这 个 事件 的 概率 为 
(1 一 j/N)Yz. 这 两 个 概率 相 加 即 得 (6.2) 
我 们 断言 在 发 生 状态 改变 时 , 外 (t+) 一 关 (t) = 1 的 条 件 概 率 是 
(于 )[ 革 Gm)+ (一 二 jm]， 其 中 X() =j (6.3) 
事实 上 , 群体 中 a 型 个 体 数量 只 有 在 一 个 4 型 个 体 死 亡 后 (从 而 被 代替 ) 才能 增加 . 
这 个 概率 是 1 一 (j/N). 第 二 个 因子 表示 新 个 体 为 a 型 的 概率 , 如 (6.2) 所 示 . 
用 类 似 方 法 求 得 在 发 生 状 态 改变 时 X( 寺 ) 一 关 (t) = -1 的 条 件 概率 是 


业 午 [J 


等 |(1 一 千 )Q 一 m9)+ 击 加 ||， 其 中 X(t) = 


这 样 , 上 述 的 随机 过 程 是 一 个 具有 有 限 状 态 的 生 灭 过 程 ', 对 应 于 a 型 数量 为 
7(0 < 7 < 和 N) 的 无 穷 小 生 和 灭 的 比率 分 别 是 


5 区 -mt+G- 坟 


| 
虽然 这 些 参数 似乎 很 复杂 , 但 者 我 们 令 群 体 总 量 NN 一 oo, 且 每 个 个 体 变异 的 
概率 7,7?72 依 如 下 方式 趋 于 0: 4N 一 有 和 YoN 一 kz, 其 中 0 < hk,k2 < oo, 此 
时 平稳 测度 {rejt-o 究竟 如 何 , 却 是 一 个 令 人 感 兴趣 的 问题 . 为 方便 , 我 们 把 过 程 
的 状态 转换 到 区 间 [0,1], 这 只 需 定 义 新 的 状态 为 j/N, 即 a 型 个 体 在 群体 中 的 比例 . 
为 了 研究 在 一 个 固定 分 数 z(0 < x < 1) 上 的 平稳 密度 , 我 们 将 求 zt 与 上 = {zN] 且 
k 一 oo 时 极限 , 其 中 [zxN] 表示 不 超过 zN 的 最 大 整数 . 


1. 生 灭 过 程 的 定义 是 对 无 限 状态 给 出 的 , 而 对 于 仅 具 有 有 限 状 态 的 生 灭 过 程 的 定义 和 分 析 是 比较 简单 
的 , 留 给 读者 进行 . 
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改写 AM 和 jy; 如 下 
A(N—]J N 
N= ni 4) 其 中 a= 了 一 一 一 
由 和 (NC—] b N 
= n+ ) 其 中 b= 一 一 
则 
k—1 k 
nm 一》 ny 一》 np 
j=0 j=1 
(+ 人 -三 n+ 
一 》 nli+=-) -lli+ 一 一 二 inNa 
7=1 ) ?一 | 人 一 5 
—ln(N —k)k(1 十 i) 
利用 表达 式 ， 
mL+z=z 一 本 二 村- jzl<1 
可 以 得 到 


其 中 当 上 一 oo 时 ck 趋 于 有 限 极限 . 因此 利用 关系 式 


k—1 


;~Ink, 当天 一 oo 时 ， 
j=1 
我 们 有 ， 
-1 
> in (1+ 5 ~ nk 二 ck， 当 上 一 00 时 . 
7 三 1 
以 类 似 方 法 我 们 得 到 


< 一 b Nb 
] ~ ln ; 
Dm (tH) ny + dr 当天 一 oo 时 ， 


其 中 当 上 一 oo 时 di 趋 于 一 个 有 限 极限 . 利用 上 述 关系 式 , 我 们 有 


ka(N ~ k)bNa 


nh ~ In (CRN A 


); 当 一 oo 时 ， 


(6.4) 
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其 中 In Ck = ck 十 dk 当 上 一 o0 时 趋 于 一 个 极限 , 假设 是 C. 注意 到 当 六 一 oo 时 
a 一 k2 和 6b 一 1, 并 由 于 上 k= [INz, 当 六 一 oo 时 我 们 有 


np ~ CRaN®2 lps-1(1 一 Za 
由 (6.4) 得 
re ~ aCkk®™! (1 — 2) 
所 以 N-—1 一 1 
志 岂 mR) QR) 
由 于 当 上 一 oo 时 Ck 一 C, 上 式 右边 部 分 可 作为 如 下 积分 


1 
ec / T2711 — z) tld 
0 


的 黎 曼 和 , 这样 
N 1 
i K2 eo R21/1 VE 一] ， 
> AN“2Ko /> ( 工 一 Z) dz 


所 以 在 0, 1 是 密度 函数 为 


1 ze oz) Ta (1 一 za dz 


nk 
》 Tri N rT*2—1 7 Ki : xa—l m1—1 
/ (1 ~ 7z)"'™ dz / zx2 (1 一 Z)xiltdz 
此 处 dz ~ 1/N. 这 是 一 个 参数 为 ki 和 pa 的 Beta 分 布 . 

例 4 Logistic 过 程 我 们 考虑 一 个 群体 , 其 总 量 X(t) 的 值 域 对 于 所 有 + 上 > 0 
是 在 两 个 固定 整数 Ni 和 Noz(Ni < No) 之 间 . 假设 每 个 个 体 在 时 刻 土生 和 灭 比率 分 
别 为 

A=a(Ns— Xt)) 和 p= PX) — NN) 


并 且 群 体 中 每 个 成 员 的 行动 彼此 独立 . 因此 该 群体 的 生 和 灭 比 率 分 别 为 
Mn =an(Ns—n) 和 pn = Bn(n— Ni). 


这 是 因为 石 群体 总 量 X(t) 是 mn 则 个 个 体 的 每 一 个 都 有 一 个 无 穷 小 生 的 比率 和 
所 以 xn = an(N2 一 nn). 同样 的 理由 可 用 于 解释 pn. 

在 这 样 条 件 之 下 , 可 以 期 望 生 过 程 的 值 是 在 两 个 常数 Ni 和 Na 之 间 波 动 . 因 
为 如 果 X(t) 靠近 Na2, 此 时 灭 的 比率 高 , 生 的 比率 低 , 则 X(t) 将 朝 和 Ni 移动 . 最 后 ， 
过 程 将 表现 为 在 两 个 极限 Ni 和 Na 之 间 平 稳 的 波动 
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在 这 种 情况 下 . 平稳 分 布 是 


C Nas— Ni\/a\™m 
TI mr 7 ? 一 , 上， ee 一 3 
PNi+ vi( m )(9) m=0,1,2 2— Nl 


其 中 c 是 一 个 适当 常数 , 以 保证 》 pri+m = 1 为 此 , 我 们 只 要 注意 


AN ANIAI…… 入 NiTm 
HNi+iHNI+T2° LNi+m 
加 oao™N(Ni 二 1 (ON 十 到 一 1 一 NON -NMN-m+1) 
本 Bm(Ni+1):… (Ni + m)m! 


-wa )(D™ 
4.7 市 有 吸收 状态 的 生 允 过 程 


生 灭 过 程 中 当 Xo = 0 时 的 情形 是 非常 重要 的 . 这 时 状态 0 成 为 吸收 状态 . 当 粒 
子 从 状态 1 开始 转移 时 , 将 以 概率 和 i/( 和 1 十 jn) 运动 到 状态 2, 以 概率 jv1/(A1 十 有 
陷入 状态 0. 以 0 为 吸收 状态 的 生 灭 过 程 的 一 个 重要 例子 是 没有 迁 入 的 线性 增长 过 
程 (4.6 节 中 的 例 1). 在 这 种 情况 下 , 和 = nA 和 jn = ny、 由 于 群体 的 增长 只 由 当 
时 的 群体 总 量 决 定 , 因此 当 群 体 总 量 为 0 时 , 此 后 它 就 一 直 停 留 在 0, 即 0 是 吸收 状 


态 


si 


A. 被 状态 0 吸收 的 概率 


计算 从 状态 i(i > 1) 出 发 最 后 被 状态 0 吸收 的 概率 将 是 一 个 有 趣 的 问题 . 按 推 
测 这 个 事件 不 是 必然 事件 , 因为 可 以 想象 粒子 ( 即 状态 变量 ) 可 能 永远 游 动 在 状态 
(12…) 或 可 能 趋 于 无 穷 
设 Al = 12……) 表示 从 初始 状态 i 出 发 被 状态 0 吸收 的 概率 . 通过 考虑 第 一 
次 转移 之 后 所 有 可 能 状态 , 我 们 可 以 写 出 ji 的 递 推 公 式 . 由 于 第 一 次 转移 必然 是 
Ai 
Hi 十 Ai 


开 A 十 rm 一 


i 一 i 十 1 以 概率 
i—— 1—1 以 概率 


Li 
Hi 十 Ai 
我 们 直接 得 到 


Ai Hi 、 
二 一 一 一 一 好 1 十 -一 一 好 -1 i 之 1， 7.1 
mt AN {7D 


其 中 wo = 1. 导出 (7.1) 的 另 一 个 方法 是 考虑 与 生 灭 过 程 相 联 系 的 “ 杠 入 随机 游 动 ”. 
具体 地 说 , 我 们 仅仅 在 转移 时 刻 考察 生 灭 过 程 . 以 这 种 方式 产生 的 离散 马尔 可 夫 链 


上 
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用 { 访 }%2o 表示 , 其 中 Yh = Xo 是 初始 状态 , Y,(n > 1) 是 第 ”次 转移 的 状态 . 显 
然 , 转移 概率 矩阵 具有 形式 


1 0 0 0 
p qi 0 p: 0 
0 gg 0 pe .|| 
其 中 和 
i 一 1 1 (2 之 1). 
Pi = TT gq: (i 之 1) 


嵌入 随机 游 动 被 状态 0 吸收 的 概率 和 对 应 的 生 灭 过 程 是 相同 的 , 因为 这 两 个 过 程 有 
相同 的 转移 . 


现在 我 们 在 uo = 1 和 0 < wi < 1(i> 1) 的 条 件 下 来 解 (7.1). 改写 (7.1) 为 
(Uit1 — Wi) = (uw 一 Ui-1)， i 之 1. 


置 v= Wi+l 一 耻 , 我 们 得 到 


由 最 后 关系 式 的 迭代 得 到 公式 
ui ~ ti= Vi = Tv, i>1. 
+1 (I x ) 


对 这 些 方程 从 i= 1 到 i=m 求 和 , 我 们 有 


Um+1 — Vi = (ui1— 1) D3 (IT 名 Rm (7.2) 
i=1 j=1 
因为 um 是 概率 , 且 以 1 为 上 界 , 可 知 如 果 
5 II)=~ (73) 


i 二 1] 7 一 1 


则 一 定 有 = 1 和 wm = lm > 2. 换 句 话说 , 若 (7.3) 成 立 , 则 从 任何 初始 状态 出 
发 最 后 被 状态 0 吸收 是 肯定 的 . 假设 0 < wi < 1, 则 当然 有 


(1) < 


4 一 ] j=1 
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显然 , um 是 随 着 m 增 大 而 减 小 的 , 因为 从 状态 m 到 状态 0 的 过 渡 期 间 需 要 经 过 中 


间 状 态 . 更 进一步 , 我 们 证 明 wm 一 0(m 一 oo). 假设 相反 , 即 wm > a > 0(m > 1)， 
由 简单 概率 论 命题 推 得 um = 1(m > 1). (读者 可 补充 出 其 正式 证 明 .) 在 (7.2) 中 令 


m 一 co, 解 得 
> (Ts/%) 
U1 一 -一 一 
1 十 (II 
i=1 j=l 
此 外 , 我 们 有 z 
》， (HL ) 
Um+1 一 m 之 |]. 
1+ (Ts/3y) 


ti 一 ] j=1 


在 线性 增长 生 灭 过 程 的 例子 中 , 由 于 hn = ny, 和 n= nA, 由 直接 计算 可 得 


”ne 


(m > 1). 
um=1 当 j > 入 


B. 平均 吸收 时 间 


考虑 这 样 一 个 问题 如 何 确 定 从 状态 m 出 发 到 达 吸 收 状态 的 平均 时 间 . 

我 们 假设 条 件 (7.3) 成 立 , 因此 吸收 是 肯定 的 . 注意 , 我 们 不 能 把 此 问题 归结 为 
考虑 典 入 随机 游 动 , 因为 在 每 个 状态 的 实际 辟 留 时 间 与 计算 平均 吸收 时 间 是 有 关 的 . 

设 w; 是 从 状态 i 出 发 的 平均 吸收 时 间 ( 它 可 能 是 无 限 的 ). 考虑 在 第 一 次 转移 
之 后 的 可 能 状态 以 及 利用 在 状态 i 的 平均 等 候 时 间 为 (Ai + ji) 这 个 事实 (实际 
上 是 以 入 ;十 jii 为 参数 的 指数 分 布 ), 我 们 导出 递 推 关 系 式 


1 A 和 i s 


nH . 
一 一 -十 一 一 ww， 十 Wi—1l,， i 之 1， 1.4 
i 和 i 十 Hi Ai +t 和 i 十 ji 一 (7 
其 中 约定 wo 二 0. 令 zz 二 wi 一 Li 十 1)， 并 改写 (7.4) 
1 Ht , 
一 一 十 一 四 1， i 之 1. 9 


由 闪 代 得 


i 
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最 后 ， 


(乘积 [yx 定义 为 工 ) 
7 十 | 


把 CI 换 回 (Wm, 我 们 有 


“momn= oil [1 11 之 1 (7.6) 
4 一 7 二 i 十 1 7=1 
引用 记号 a 
LA2 4 一 1 
四 HH2 上 
则 有 
1 有 m ja m 
[| = [2 (7.7) 
i=} j=itl 7 j=1 7 i=!1 
然后 利用 (7.7), 关系 式 (7.6) 成 为 
(了 2 ) (wm — Wm+1) = >》 一 Wi . (7.8) 
j=1 0 i=l 


注意 , 如 果 》_ pi = co, 由 (7.8) 知 必定 有 wi = oo. 事实 上 , 由 于 wm < wm+1 对 


于 所 有 的 m 成 立 ， 若 我 们 假设 wi 是 有 限 的 , 则 当 mm 足够 大 时 , 这 个 性 质 将 不 成 立 . 
现在 我 们 假设 3 < co 在 (7.8) 中 令 m 一 oo 得 


气 产 1 
虽然 比较 麻烦 但 仍 可 以 证 明 
(六 
2m (I) -ont) =0 
因此 


我 们 把 这 节 的 讨论 总 结 为 如 下 的 定理 : 
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定理 7.1 ”考虑 一 个 生 和 灭 参数 分 别 为 和 n, jn,n > 1 的 生 灭 过 程 , 其 中 Xo = 0， 
因此 0 是 吸收 状态 . 从 初始 状态 m 出 发 被 状态 0 吸收 的 概率 是 


2》, (Dj 1/%) ss 
一 7 一 1 基 > 过 < oo， 
1+》、 (Ha ) (7.9) 
?= 7 二 1] 
) 站 co py _ 
2 (11 1 和 
平均 吸收 时 间 为 
OO 各 >》 pi 一 DG， 
r w (7.10) 
n+ 沁 ( 了 天 ) 半 w 者 Dn 
?一 ] 7 一 1 大 = 7 一 7 十 1 


其 中 pi = (Xi Nl)/ (nike i). 
对 于 线性 增长 生 灭 过 程 的 例子 (An = nj = mA > 和, 从 状态 1 出 发 的 平 
均 吸 收 时 间 wi 为 


~ lA 1 /1 /Mr 1 1 入 
D0);) -oh ed 全 di 人 -5 


4.8 ”有 限 状态 连续 时 间 马 尔 可 夫 链 


一 个 连续 时 间 马 尔 可 夫 链 X(t > 0) 是 状态 为 非 负 整数 的 马尔 可 夫 过 程 . 我 们 
通常 假设 转移 概率 是 平稳 的 , 即 


Pij(t) = Pr{Xtrs = jIX, = i. (8.1) 


无 限 状 态 连续 时 间 马 尔 可 夫 链 的 许多 方面 将 在 后 面 章 节 中 讨论 . 
马尔 可 夫人 性 表明 Pij;(t) 满足 : 
(a) Pi;(t) > 0; 
N 
b) > Pi 人 =1,1,7€D: 


j=0 
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N 
(cj Pir(s++t) = >》 Pi;(s)Pjk(t), t,s 之 0 ( 切 普 曼 - 科 尔 莫 龙 罗 去 方程 ); 
j=0 
此 外 , 我 们 假设 
1l，2; 三 J， 
人 内 = | 0，i 关 放 
如 果 P(t) 表示 矩阵 ||Pi;(t)| 人 名-o, 则 性 质 (c) 用 矩阵 符号 可 简洁 地 表达 为 
P(t+s)= P(t)P(s), t,s>0. (8.2) 


性 质 (d) 说 明 P(t) 在 上 = 0 是 连续 的 , 因为 (8.2) 缠 涵 P(0) = 了 单位 矩阵 ). 由 (8.2) 
易 推 得 P(t) 对 所 有 t > 0 是 连续 的 . 事实 上 , 在 (8.2) 中 如 果 s = hh > 0, 则 由 于 (d) 
我 们 有 

lim P(t +h) = P(t) ,lim, P(h) = PO = P(t). (8.3) 


另 一 方面 , 对 于 +> 0 和 0<h<t, 我 们 把 (8.2) 写 为 形式 
P(t) = P(t — nh)P(h). (8.4) 


但 当 hh 足够 小 时 ,， P(h) 近似 于 单位 阵 , 所 以 P(h)-[P(h) 的 道 ] 存在 , 并 且 也 接近 
于 单位 阵 工 加 此， 


P(t) = P(Y) Jim Ph) 一 am, P(t—h). (8.5) 
极限 关系 式 (8.3) 和 (8.5) 说 明 P(t) 是 连续 的 . 
第 14 章 的 定理 1.1 和 定理 1.2 证 明了 对 于 具有 无 限 状 态 连 续 时 间 一 般 马尔 可 
夫 链 , 下面 极限 存在 ， 
一 Pii(h) 
| = ti, 
.Pi;(h) 
i 
其 中 0 < gj < oo0(i 关 站 和 0 < gi < 00, 即 qi;(i 关 7 总 是 有 限 的 , q; 可 以 是 无 限 的 . 
qi = co 在 有 限 状 态 连续 时 间 的 马尔 可 夫 链 中 不 可 能 出 现 , 事实 上 , 由 关系 式 


(8.6) 
一 Gij) ? 天 97 


N 
1= Pai(h)+ >》 Pi(h), 


j=0,jzx1 


两 边 除 以 h, 并 令 h 递减 趋 于 0, 直接 得 到 关系 式 
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由 此 即 知 g; 确实 是 有 限 的 . 
假设 (8.6) 已 被 验证 , 我 们 来 导出 一 个 Pi;(t) 的 显 式 表 达 式 , 它 使 用 下 面 无 限 
小 着 阵 来 表达 : 


4d0 dl ''* doN 
A diI0 4 ''* MN 
dNOQO YN1 …” 一 dN 
极限 关系 式 (8.6) 可 用 移 阵 形式 简单 地 表示 为 ， 
.P(Ah)-I 
h A. (8.7) 


借助 于 这 个 公式 并 回顾 公式 (8.2), 我 们 有 


P(t+h)— P(t) P(t)[P(h)-1 P(h)-I 
Pt). (8.8) 
右边 极限 存在 , 从 而 导出 矩阵 微分 方程 式 
P'(t) = P(t)A = AP(t), (8.9) 


其 中 P'(t) 表示 元 素 为 P 区 的 矩阵 - 
P1(t) 的 存在 性 显然 是 (8.7) 和 (8.8) 的 直接 推论 . 
方程 (8.9) 在 初始 条 件 P(0) = 了 下 可 按照 常 微分 方程 组 理论 ! 解 得 


P(t) = eAt=I+ 3 和， (8.10) 
n= 二 1 


P(t) = UA(t)U™, (8.11) 
其 中 矩阵 U 的 列 向 量 分 别 是 wo ua 并 且 h(t) 是 对 角 和 抢 阵 
exp(Aot) 0 “+ 0 
Al) = 0 ep . ， 0 
0 0 : . oxp(Awt) 


本 章 初 等 问题 7 和 初等 问题 13 中 含有 (8.10) 或 (8.11) 的 应 用 . 


1. E. A. Coddington, and N.Levinson, Theory of Ordinary Differential Equations, Chapter 3. 
McGraw-Hill, New York, 1955. 
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初 寺 问题 
1. 设 随 机 变量 X1 和 Xs 是 相互 独立 的 且 分 别 服从 以 和 1 和 Xo 为 参数 的 指数 分 布 , 即 


Pr{Xi > t} = exp{~Mit}, t>0,i= 1,2. 


今 
N= 1， 耕 XI < 入 2， 
2, 车 A2 < Xi1. 
U = min{Xi, X2} = XN, 
V 一 max{ 义 1, XX2}，, 
且 
W =V-U=|X— Xl. 
试 证 明 


(a) Pr{N = 1}=Ai/(M1+ XA) 和 Pr{N = 2} = MN/(NM1 + M2). 
(b) 对 于 上 >0 有 PrfCZ > 寻 = exp{ 一 (Mi 二 和 A2)t}. 
(c) N 和 UU 是 相互 独立 的 随机 变量 . 
(d) 对 于 上 > 0， 
PrfW > tIN = 1} = exp{— 和 A2t} 和 
Pr{W > tIN = 2} = exp{—A 和 1t}. 
(el 忆 和 他 =Y- 7 是 相互 独立 的 随机 变量 . 
2. 设 某 装置 在 次 震动 之 后 失灵 . 乔 震 动 按 参数 为 和 的 沿 松 过 程 发 生 , 求 该 装置 寿命 了 
的 密度 函数 . 
解答 ， 
Artr~leo—t 


f(t) = | T(k) 


0, t<0. 


t>0, 


3. 设 有 参数 为 和 的 泊 松 过 程 {X(t),t > 0}. 大 每 次 事件 到 达 以 概率 p 记录 下 来 , 并 旦 彼 
此 间 相 互 独立 . 令 {Y(t),t > 0} 是 记录 下 来 到 达 事 件 的 过 程 , 试 证 明 Y(t) 是 参数 为 Xp 的 泊 
松 过 程 . 

4. 设 { 关 ( 引 ,t > 0} 和 {Y(),t > 0} 是 参数 分 别 为 Xi 和 和 2 的 相互 独立 的 泪 松 过 程 . 令 
21(t) = X(t) + Y(t), 22(t) = X(t) — Y(t), Za(t) = X(t) + kk 是 正 整数 , 试 确定 上 述 过 程 中 
哪 一 个 是 泊 松 的 , 并 求 其 参数 入. 

5. 设 到 达 一 电报 局 的 信息 是 按照 平均 每 小 时 3 个 信息 的 泊 松 规律 , 试 求 ， 

(a) 早 展 八 时 至 十 二 时 没有 信息 到 达 的 概率 . 

(b) 下 午 首次 信息 到 达 时 刻 的 分 布 . 

6. 设 六 (t) 是 参数 为 入 的 齐 次 泪 松 过 程 . 试 确定 X(t) 与 六 十 7)(t > 0r > 0) 之 间 的 
协 方差 , 即 计算 E[(X(t) 一 EIXCOD(X(t+7) ~ ElX(t + 7)))}. 
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7. 连续 时 间 马 尔 可 夫 链 有 两 个 状态 , 分 别 记 为 0 和 1. 在 状态 0 的 等 候 时 间 遵 循 参 数 为 
入 > 0 的 指数 分 布 . 在 状态 1 的 等 候 时 间 遵 循 参数 为 4 > 0 的 指数 分 布 ， 计算 在 时 刻 0 处 于 
状态 0 并 在 时 刻 t 仍 处 于 状态 0 的 概率 Poo(t). 


解答 ， 
Poo(t) = PE + He 
8. 在 初等 问题 7 中 令 入 = 4 并 定义 N(t) 是 系统 在 时 间 上 > 0 内 改变 状态 的 次 数 , 试 求 
N(t) 的 概率 分 布 . 
解 谷 : 


Pr{N(t) = n} = ee 
9. 设 X(t) 为 纯 生 连续 时 间 马 尔 可 夫 链 , 若 


Pr{ 在 (t,t 十 h) 内 发 生 一 个 事件 |X(t) = 奇数 } = 和 ih 十 o(h) 
Pr{ 在 (t,t 十 h) 内 发 生 一 个 事件 |X(t) = 偶数 } = A2h 十 o(h) 


其 中 当 hh 0 时 ol(h)jh 一 0. 取 XX(0) = 0. 试 求 下 面 概率 ， 
记 (t) = Pr{X(t) = 奇数 }， 已 (t) = Pr{X(t) = 偶数 }. 
提示 ; 导出 微分 方程 


PI(t) = —APi(t) + ANP), Blt) = NP(t) — A Plt) 


并 解 之 . 
解答 ， 、 
P(t)= i rp (1 ~ exp{—(Ai + A2)t}); 
Sl 
Pz(t)= Al1 十 入 2 t A1 十 入 2 exp{—(A1 + 和 2) 村 
10. 在 初等 问题 9 的 条 件 下 , 试 求 E[X( 引 )]. 
解答 ， 


2A1X2 ， (AN — Aa) 
Al 十 入 2 (Al 十 和 A2)2 


11. 假设 g(t) 是 一 物品 已 知 在 时 刻 t 前 未 损坏 过 而 在 时 刻 t 损坏 的 条 件 比 率 , 即 
Pr{ 在 时 间 (t,t 十 h) 内 损坏 | 时 刻 t 前 未 损坏 } = g(t)h 十 o(h),h 40， 
假设 g(t) 是 正 的 并 且 在 (0, oo) 连续 . 试 利用 g(-) 求 F(t) = Pr{ 在 某 个 时 刻 > 损坏 , 7 < 妇 的 


ElX(t)] = 


[exp{ 一 (Al 十 Xz)t 一 陡 . 


表达 式 . 
提示 ， 导出 F(t) 的 微分 方程 式 . 
解答 ， 


F(t) = 1- exp - 人 srjar| 
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12. 考虑 依 时 间 变 化 的 泊 松 过 程 , 即 在 时 间 区 间 (t,t 十 h) 内 出 现 一 个 事件 巨 写 之 前 
事件 出 现 次 数 独立 , 并 且 其 概率 为 和 (t)h 十 op) 一 0). (注意 ,和 依赖 于 z). 
(a) 证 明 在 时 间 区 间 [0, s] 内 事件 五 不 出 现 的 概率 为 


(~ x) 


(b) 证 明 在 时 间 区 间 [0, s] 内 事件 EE 出 现 必 次 的 概率 为 


让 ( [ ae) exp ( -上 ede) 


13. 有 两 条 横 窑 大 西洋 海底 电线 , 每 条 每 次 可 处 理 一 电报 信息 . 每 条 电缆 发 生 故障 的 时 间 
均 服从 参数 为 和 的 指数 分 布 , 其 修理 所 需 时 间 均 服从 参数 为 A 的 指数 分 布 . 已 知 在 时 刻 0 的 
两 条 电线 工作 正常 , 若 在 时 刻 t 有 两 个 信息 同时 到 达 , 试 求 此 时 两 条 电费 均 工作 正常 的 概率 . 

提示 : 这 是 具有 三 个 状态 连续 时 间 马 尔 可 夫 链 . 

解答 ， 


be 
AT+H QA+m? A+p)? 


14. 考虑 具有 参数 和 ,4 和 a = 0 的 线性 增长 生 灭 过 程 . 设 X(0) = 1. 求 在 第 一 个 死亡 时 
生物 体 数 目的 分 布 . 
解答 ， 


2 和 A2e 一 2(A 十 六 2 和 1 CA+Ht 


Pr{ 在 第 一 个 死亡 之 前 有 大 个 出 生 } = (p/(p 二 NA)OMVOAT DID 


15. 求 线性 增长 生 灭 过 程 ( 见 4.6 节 例 1) 当 入 < jy 时 平稳 分 布 
解答 ， 
_ /A (A/N(oAN+D: (ao/N)+n-l)/, A 
(1) 

16. 一 电话 交换 台 有 m 条 话 路 . 呼唤 以 参数 为 的 泊 松 过 程 到 达 . 对 于 一 呼唤 到 达 , 若 
存在 话 路 未 被 占用 , 则 此 呼唤 被 接受 , 否则 丢失 . 每 次 呼唤 持续 时 间 是 一 服从 参数 为 /的 指数 
分 布 的 随机 变量 , 并 且 它 们 彼此 独立 . 求 被 占用 话 路 数目 的 平稳 分 布 . 

解答 ， 

(Vw)" (1/n) 
>》 (AMA) (HK!) 


k=0 


17. 我 们 从 时 刻 0 开始 观察 一 个 放射 性 原子 . 此 原子 衰变 至 时 刻 t(t > 0) 停止 放射 , 其 分 


布 由 下 式 确 定 ， 
Po- 人 0 ) =P) 


l1—~e *r TT>0 


Dn 一 n= 0,1,2,...,m. 
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将 此 原子 在 时 刻 t 时 状态 视 为 一 随机 变量 


-{ 若 原子 在 时 刻 上 是 放射 的 ， 
1， 若 原 子 在 时 刻 t 不 是 放射 的 . 


则 {zt} 构成 一 随机 过 程 . 
现 假设 在 时 刻 0 我 们 开始 观察 NN 个 独立 放射 性 原子 , 按 上 述 意 义 相 应 有 随机 变量 z;,; = 


1,2,…,NN. 令 Xi 二 》 zt. 那么 {Xt} 也 是 一 随机 过 程 . 试 证 明 对 于 t < 1/X( 意 指 上 与 1/》 


比较 是 可 忽略 地 小 ) 和 足够 大 的 NN, {Xe} 是 非常 近似 于 参数 为 和 Nt 的 泊 松 过 程 . 

18. 设 在 问题 17 中 不 满足 上 < 1/ 和 , 试问 

(i) 此 过 程 具 有 独立 增 量 ? (ii) 它 是 否 平稳 ? 

(iii) 它 是 否 有 平稳 转移 概率 ? (iv) 它 是 否 马尔 可 夫 过 程 ? 

解答 ，(i) 是 ，(ii) 不 是 , (iii) 是 , (iv) 是 

19. 本 题 是 研究 一 移居 生物 群体 灭亡 时 间 . 

令 Z(t) 表示 在 时 刻 土 群体 总 量 . 在 (2(t);t > 0) 为 一 生 灭 过 程 ,其 个 体 出 生 比 率 为 , 死 
亡 比 率 为 4. 这 意味 着 每 个 个 体 彼此 独立 地 在 时 间 区 间 (t,t 二 At) 内 以 概率 A(Abt)( 近 似 地 ) 繁 
殖 一 个 新 个 体 , 而 以 概率 A(AN 死亡 . 

我 们 想 构造 一 种 模型 用 来 估计 此 种 个 体 种 群 平均 存活 时 间 ,， 并 希望 用 它 来 反映 出 种 群 数 
目 均 有 最 大 上 界 的 事实 . 假设 由 于 自然 环境 限制 , 此 群体 最 大 限度 的 总 量 为 外 个 个 体 . 由 于 所 
有 个 体 都 有 可 能 死亡 , 故 当 时 间 足 够 长 时 , 种 群 必 将 走向 绝迹 .我 们 希望 在 这 个 模型 中 ， 当 群 
体 较 小 时 具有 指数 增长 的 性 质 , 如 上 限 &. 超过 最 大 限度 则 不 能 正常 地 繁殖 . 这 里 有 很 多 种 方 
法 使 群体 总 量 接近 &, 旦 平衡 保 桂 原状 . 为 简单 , 我 们 取出 生 参 数 为 

、 | AM， 当 i 二 0,..…,k 一 1 
0， 当 i 之 k, 
死亡 参数 为 pi = pi(i = 0,1,……). 

在 上 述 模 型 之 下 , 经 过 一 段 时 间 , 此 生物 群体 最 后 必定 灭亡 . 假设 最 初 此 群体 仅 有 一 个 个 
体 , 试 计算 其 平均 灭亡 时 间 . 

20， 设 有 一 架 机 器 失灵 有 两 种 形式 ， 第 一 种 形式 失灵 发 生 在 区 间 (tt 十 h) 的 概率 为 
和 ih 十 o(h), 而 第 二 种 形式 发 生 在 区 间 (t,t 十 h) 的 概率 为 2h 十 ol). 当 机 器 失灵 时 即 进行 修 
理 , 修理 持续 时 间 服 从 指数 分 布 , 其 参数 对 应 于 第 一 种 形式 失灵 的 为 Ai, 对 应 于 第 二 种 形式 的 
为 J2. 试 计算 这 架 机 器 在 时 刻 t 正在 工作 的 概率 . 

解答 ， 

—(A 十 入 2 ) Ai Aa 
PH=eq， 其 中 Q= Hi -Ai 0 
Hp2 0 一 pa 


21. 试 比较 MIMI1 系统 的 两 种 排队 规则 , 一 种 是 先 来 移 服 务 ， 另 一 种 是 后 来 先 服 务 (例如 
供 服 务 用 品 是 从 一 堆 物 品 的 顶部 取 的 ). 它们 的 排队 长 度 , 等 候 时 间 以 及 服务 忙碌 期 的 分 布 是 
否 不 同 ? 

解答 ,排队 长 度 和 服务 忙碌 期 是 相同 的 , 而 等 候 时 间 的 分 布 不 同 ， (为什么?) 

22. (有 选择 的 排队 过 程 ) 设 顾客 依 参 数 为 入 的 泊 松 过 程 到 达 柜 台 ， 服务 时 间 是 独立 同 分 
布 的 , 其 共同 分 布 为 参数 j 的 指数 分 布 . 当 顾 客 发 现 服务 员 FE 在 服务 时 , 以 概率 p(0 < p < 1) 
加 入 队伍 . 试用 生 灭 过 程 描 述 此 模型 . 

解答 ; An 一 Ap; jn 三 内. 

23. 考虑 规则 为 后 来 先 服务 的 M|MI1 系统 . 令 X(t) 表示 在 时 刻 t 的 排队 长 度 , 试 证 明 
{X(t);t 之 0} 是 一 生 灭 过 程 并 确定 其 参数 . 

解答 ;An 一 入 jn 二. 

24. 在 条 件 多 (0) = NN = 1 之 下 , 试 确定 Yule 过 程 的 均值 和 方差. 

解答 ， E[X(t)] = ext Var[X(t)] = e2xt(1 — e~*t). 


加 题 


1. 设 {X(t),t 0} 和 {Y(),t > 0} 分 别 是 参数 为 和 和 和 2 的 两 个 相互 独立 泊 松 过 程 . 


今 
Z(t) = X(t)— Y(t), t>0. 
这 是 状态 空间 为 全 体 整数 的 随机 过 程 . 令 


P(t) = Pr{2Z(t) =n}, n=0,+1,+,2,.…. 
试 证 明 公 式 


2 P(t)z" = exp(—(M1 + Ma)t)exp(Mzt + (M2/z)t), |z| #0, 
并 计算 E[Z(t)] 和 E[Z(t)”]. 

答案 ; E[2Z(t)]? = (Ai + Mz)t + (M1 — Xa)2t2. 

2， 考虑 两 个 独立 泊 松 过 程 六 (t) 和 Y(t), 其 中 EI[X(t) = Xt, BIY (tj = yt. 对 于 过 程 
X(t)， 有 两 个 事件 发 生 在 了 和 T > 了 了 , 使 得 当 < t < T 时 有 X(t) = X(T)， 并 且 
X(T') =X(T) 十 1. 定义 N= Y(T') 一 了 (T) = 发 生 在 区 间 (T,T') 内 过 程 Y(t) 的 事件 数 . 
试 求 NN 的 分 布 . 


和 PrN =m} = 37 (i) ,m=0,1,2,.… 


3. 考虑 一 纯 灭 过 程 ， 其 中 Hn 二 NH, N= 1, 2,.…., 即 当 7 > k,k,t >0 时 有 P{X(t+h) 一 
j|X(t) = 上} = 0. 设 急 始 群 体 总 量 为 i. 试 求 P(t) = P{X(t) = n}, E[X(t) 和 Var(X(t)). 
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从 村: 
P, (+) 一 (3 e- "rt(] _ ert) ， 


EIX(t) = ie +*’, 
VarX(t) = ie *'(1 — e+t). 

4. 考虑 参数 为 6 = 1, 初始 状态 为 N = 1 的 Yule 过 程 . 设 第 一 个 个 体 将 死亡 , 当 已 知 此 
个 体 在 时 刻 t 活着 而 在 区 间 (t,t 十 有) 死亡 的 概率 为 jh 十 o(h). 试 求 最 初 单一 个 体 及 此 个 体 
死亡 时 刻 其 后 代 所 产生 后 代 总 数 的 分 布 . 

答案 ; 由 指定 的 一 个 个 体 和 此 个 体 死亡 时 刻 其 后 代 所 产生 后 代 总 数 为 n 的 概率 为 

Bt eBiyn -ntgqs — LI((K/B) + DTn+1) 
人 

5. 设 (X(t),Y(t)) 是 二 维 随机 过 程 , 其 中 X(t) 是 参数 为 Ai 的 泊 松 过 程 , Y( 是 与 X(t) 
独立 的 参数 为 Xa 的 泊 松 过 程 . 已 知 过 程 在 上 = 0 时 处 于 状态 (zo, yo), 此 处 zo + yo < z, 试 求 
状态 与 直线 zx + y = z 相交 于 点 (x,y) 的 概率 . 

答 业 ; 


z 一 If AN 和 Nm 
之 之 
| | TT— 20 ) G5) (3 ) » L210,Y 之 加， 


0， 其 他 . 


6. 考虑 参数 为 和 的 泊 松 过 程 , 设 了 为 观察 到 第 一 个 事件 所 需 的 时 间 , 令 N(T/k) 表示 紧 
接着 的 T/k 单位 时 间 里 事件 发 生 的 次 数 . 试 求 N(T/E)T 的 前 两 阶 甜 . 


和， 
et 人 井中- 记 二 本 志 + 闽 
7， 考虑 n 个 独立 对 象 (诸如 灯泡 ), 其 损坏 时 间 ( 即 寿命) 遵循 指数 分 布 ， 其 密度 函数 为 


f(z,0) = 9 ”exp(-z/6)7 > 0; 当 z < 0 时 , 密度 函数 为 0(9 是 正 数 ). 按 损 坏 的 顺序 观察 
个 对 象 , 令 


入 1 nm < 入 2 mn < 四 < Xrn 


表示 首先 损坏 的 7 个 对 和 象 的 寿命 . 试 确定 Xi,n,i = 1,2,… ,7 的 联合 密度 函数 . 
答 业 ， 


nyl Z1 十 Z2 十 … 十 Zr-1 十 (人 一 "十 1)zr 
jz 72 pr) 一 7| -FP ). 


8. 在 上 面 问 题 中 定义 Y1n 一 兴 1 nm 和 
Yin 一 Ain 一 i_1n) 2 < ? 入 7 了. 


试 证 明 Yi,n 是 相互 独立 的 并 求 其 各 目的 分 布 函数 


一 2 十] 
pon ego (ey) 


9， 设 有 一 参数 为 的 泊 松 过 程 . 若 已 知 在 时 间 上 内 发 生 了 n 个 事件 , 试 求 出 现 7 个 
(7 <n) 车 件 的 时 间 密 度 师 数 . 


答案 : 
nl rr! ry 
p(x) = (1) ' <7<t 
0， 其 他 . 
10. 设 M 是 连续 时 间 生 灭 过 程 , 其 中 和 An = 入 > 0m>0 p=0, hun>0n>1l. 令 
二 2, xn < 00, 此 处 rn 二 入 7/ (pip2… pn),， Ti/7 是 过 程 的 平稳 分 布 . 假定 初始 状态 是 一 


随机 变量 , 其 分 布 就 是 该 过 程 的 平稳 分 布 . 试 证 明 在 [0, 内 死亡 的 数量 具有 参数 为 Xt 的 泊 松 
分 布 


提示 : 设 ak 人 t) 是 至 时 刻 t 为 止 死 亡 数 为 k 的 概率 . 导出 微分 方程 式 
@4(t) = —Aar(t) + Aag_i(t), k=1,2,... 


11. 下 面 定 义 为 二 维 情况 下 多 变量 泊 松 过 程 的 定义 . 设 (X(t),Y(t)) 由 X(t) = alt) + 
YD), Y(t) = BE) 十 Yt) 所 确定 , 其 中 a(t), B(t) 和 Y(t) 是 参数 分 别 为 和 i, 和 2 和 和 3 的 彼此 独 
立 的 泊 松 过 程 , 试 求 (X(),Y(t)) 分 布 的 概率 母 函 数 ， 


答 业 ， 
条 > Pr{X(t)=i,Y(t) = jy 
一 exp{t(Aiz 十 A2Y 二 A3TY 一 Ai 一 Aa 一 和 As)}. 

12. 设 有 一 出 生 比率 为 A 及 初始 群体 总 量 为 1 的 Yule 过 程 {Ni,t > 0}. Ni(z) 表示 群体 
在 时 刻 t 年 龄 不 超过 x 的 成 员 数 . 试 求 Ni(z) 的 分 布 函数 . 

提示 ; 对 Ni-zs 取 值 进行 假设 . 

答案 : ck 

Pr{Nt(7z) = k} = i 

13. 设 {Xi(t);t > 0}, i 二 1,2, 是 具有 相同 参数 和 的 相互 独立 的 Yule 过 程 , 且 Xi(0) = 
ni，1 二 1,2. 试 确定 当 已 知 Xi(t) 十 匀 2(t) = N(N > ni 十 nz2) 时 , X1(t) 的 条 件 分 布 . 

耸 娄 : 


(: 中 人 和 
ni—1 n2— 1 
Pr{Xi(t) = EX) + X2(t) = N} = 一 一 一 一 一 一 一 人 一， 大 过 ml 


AN 一: 
?1 十 ?2 一 上 
14. 继续 问题 13. 试 证 明 极 限 分 布 关系 式 ， 


1(t) (min Dt f* 
a Pr Tw < = Ti vhs QW dy. 
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提示 : 令 入 一 oo0 和 上 一 00 且 kK/N 一 y(0 <y<1). 利用 斯 特 林 公式 建 并 渐 近 关系 式 


(人 和 
ml n2—1 _ (ni 十 n2 一 1)! ni 一 n2—1 
有 一 N-1 (mi Dn — DY 有” 
mL 十 ?2 一 
然后 证 明 和 
， i1(t 
P< 二 < 
加 (ni 十 多 2 一 1)! 
加 (na 一 1)!(ne 一 1)! 
15， 设 一 个 系统 是 由 和 N 个 相同 部 件 构 成 的 . 每 个 部 件 彼 此 独立 地 运转 随机 长 度 时 间 , 直 
到 损坏 . 者 损坏 时 间 分 布 是 参数 为 和 的 指数 分 布 . 当 一 个 部 件 损坏 时 需 加 修理 ,修理 时 间 是 随 
机 的 , 遵循 参数 为 / 的 指数 分 布 . 如果 在 时 刻 t. 正好 有 n 个 部 件 正在 修理 , 就 说 系统 在 时 刻 
t 处 于 状态 n. 此 过 程 是 生 灭 过 程 , 试 确定 其 无 穷 小 参数 . 
16. 在 问题 15 中 , 设 最 初 N 个 部 件 都 在 运转 ， 试 求 有 两 个 部 件 不 运转 的 首次 时 间 分 布 
F(t). 
答案 : F(t) 的 拉 普 拉 斯 变换 是 


hy"! (1 一 2 切 ”2 +o(h). 


四 N(N — 1)X 
9) = TMNT NN IN 
1 FO) = VD (oxpl(N + VN)M) ~ expl(-N ~ VW)}. 


17. 考虑 下 述 Ehrenfest 模型 ( 见 2.2 节 中 的 B) 的 连续 变型 . 我 们 有 2N 个 球 , 标 有 号 码 
1 2,3,.… ,2N. 在 时 刻 0 每 个 球 等 可 能 被 放置 于 两 个 铅 中 之 一 . 随后 , 这 些 球 按 下 面 规则 从 一 
个 铅 到 另 一 个 铅 进 行 随机 替换 ， 一 个 球 在 时 间 区 间 (i,t 十 及 内 以 概率 h/2 + ol(h) 改变 镶 子 ， 
以 概率 1 一 (h/2) +o(h) 留 在 原来 铅 子 . 这 些 替换 在 不 相交 时 间 区 间 内 是 相互 独立 的 . 令 针 (#) 
表示 在 时 刻 寺 饶 子 了 里 球 的 数目 . 置 


Pix(t) = PHA{X(t) = kX(0) = 从 ， 放 = 0,1 ,2N 


试 证 明 公 式 
2N 
glt,s) = > Piplt)s” =2 [1 -e+(l+e ')s [+e +(l—e ')s) 7. 
‘kk 二 DD 
提示 : 定义 随机 变量 
Kit) = | 1， 车 第 i 个 球 于 时 刻 上 在 久子 1, i = 1,2,…,2N， 
| 0， 其 他 ， 


I 


则 
X(t) = 》 Xi(t). 


t 二 1 
试 证 明 
i+e™: 
9 了 
18. 设 有 一 线性 增长 生 灭 过 程 XX(), 其 中 入 = jp( 见 4.6 节 例 1), 试 证 明 


Pr{Xi(t) = Xi:(0)} = 


u(t) = Pr{X(t) = 0|X(0) = 1} 


满足 积分 方程 | 


u(t) = 5 [ 2Ae™27dr 十 5 [ 2Ae™ "u(t — 7)]*dr7. 
0 0 
提示 : 等 候 第 一 个 事件 ( 生 或 灭 ) 的 时 间 遵 循 参数 为 2 的 指数 分 布 . 
19. ( 续 上 ) 证 明 w(t) 满足 Ricatti 微分 方程 式 


w(t) + Nut) = A+ A (t), wu(0)=0. 


20，( 续 上 ) 求 u(t) 


答案 1 
At 


1+At 
21. ( 续 上 ) 求 Pr{X(t)=0|X(0) =1XGT) = 0 其 中 0<t< 了 
22. 考虑 具有 无 限 小 参数 为 和 ,jn 的 生 灭 过 程 . 试 证 明 从 状态 0 出 发 到 达 状 态 + 十 1 平 


均 的 时 间 为 
人 1 Th 
>》 AX, DT 


开 
n=0 ”天 一 0 


u(t) = 


其 中 rn 的 定义 见 等 式 (4.5). 

提示 : 设 3 表示 从 状态 n 出 发 第 一 次 到 达 状 态 十 1 所 和 需 时 间 , 试 导出 关于 E(T*) 的 
递 推 关系 式 . 

23. 下 面 的 问题 源 出 于 分 子 生 物 学 . 细菌 表面 假设 由 几 处 组 成 , 在 每 处 , 若 成 分 适当 异体 
分 子 便 可 附着 其 上 . 这 样 成 分 的 分 子 称 为 可 接受 的 . 我 们 考虑 某 一 处 , 假设 分 子 到 达 此 处 按照 
参数 为 上 的 泪 松 过 程 . 这 些 分 子 中 有 比例 为 6 是 可 接受 的 . 不 可 接受 的 分 子 停留 在 该 处 的 时 
间 服 从 参数 为 和 的 指数 分 布 . 当 它 停留 在 该 处 时 , 其 他 分 子 皆 不 附着 在 那里 , 而 可 接受 的 分 子 
能 “固定 ”在 此 处 , 使 得 任何 其 他 分 子 不 再 能 附着 在 那里 . 试问 在 本 题 中 该 处 至 时 刻 t 为止 未 
被 分 子 “国定 ”的 概率 . 

提示 : 将 问题 化 归 为 三 个 状态 连续 时 间 马 尔 可 夫 链 来 研究 . 


答案 : 
Bh 1+ 全 je 1 们 es2t 
32 一 31 81 S2 


其 中 s1, s2 是 8 十 s( 入 十 十 BA = 0 的 根 . 
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24. 考虑 一 具有 无 限 多 服务 的 排队 系统 , 服务 时 间 按 照 参数 为 上 的 指数 分 布 . 设 顾客 成 批 
地 到 达 , 其 间隔 时 间 按 照 参 数 为 和 的 指数 分 布 , 并 设 各 批 顾客 数 服从 参数 为 p(0 < p < 1) 的 
几何 分 布 , 即 Pr{ 一 批 顾客 数 为 gj= p* (1 一 p)(k = 1,2,…). 试用 连续 时 间 马 尔 可 夫 过 程 描 
述 此 过 程 , 并 具体 确定 其 无 限 小 矩阵 . 

25. 设 有 一 处 于 平稳 状态 的 MIMI1 排队 过 程 , 试 证 明 其 离开 时 间 的 间距 分 布 与 到 达 时 间 
的 间距 分 布 是 相同 的 (参见 问题 10). 

26. 设 {Xi(t);t > 0},i = 1,2, 是 独立 泊 松 过 程 ， 其 参数 分 别 为 Xi 和 A2. 着 Xi(0) = 
m, X2(0) = N—-1,Hm<N. 


(a) 试 求 过 程 X2 先 于 Xi 到 达 N 的 概率 . 
(b) 者 2(0) = n, 其 中 n < NN, 试 解 同样 问题 
答案 : (b); 
ee /Nn+t+r-l\l ,wn A 
r=0 人 )z “十 入 


27. 下 面 两 个 生 灭 过 程 ( 见 4.4 节 ) 可 着 作 有 选择 的 排队 过 程 模 型 . 
(a) 考虑 一 生 灭 过 程 , 其 参数 为 


和 nm 一 Ad 0O<g<1, 和 A> O(n=0,1,2,...), 


Hn = +£>0, 
uo =0. 
(b) 参数 为 \ 
An = nL” = k(n = 1,2,.. 让 
试 确定 每 种 情况 下 平稳 分 布 . 


答案 ; (a) 对 于 m1, pm = po(A/p)™g™™ V2 
(b) 对 于 mm > 1, pm = po( 和 /1)"™(1/ml), 其 中 po 一 e > 
28. 试 证 明 JMiMls 排队 系统 的 平稳 排队 长 度 分 布 {pn,n = 0, 1,2,…} 由 下 式 给 出 ， 


po 
m+ 


从 
po se ， lili<nsgs, 
pn = 


"5 
pop of’ 3 < < O00, 


其 中 p= 和 /sh <1. 设 8 = max(n 一 3,0)(n = 0,1,2,…) 表示 不 包括 正在 受 服 务 成 员 的 排队 
长 度 , 试 证 明 


> (sp) /il 
(i) y= Pr{Q = 0} = 一 一 和 一 一 一 
DSCsp) /+ sp)'p/stl1 ~ p)] 


t= 人 0 


上 
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(ii) E(Q) = 一 TD 

29. 设 一 系统 由 N 部 机 器 组 成 . 在 任何 时 候 至 多 M(& NN) 部 机 器 运转 , 其 余 留 作 备用 . 当 
一 机 器 运转 时 就 一 直 运 转 下 去 直到 失灵 , 失灵 时 间 服 从 参数 为 A 的 指数 分 布 . 

机 器 失灵 时 需 加 修理 . 在 任何 时 候 至 多 R 部 机 器 处 于 修理 之 中 . 设 修理 时 间 服 从 参数 为 
和 的 指数 分 布 . 这 样 一 部 机 器 可 能 处 于 四 种 状态 : (i) 运转 , (ii) 正常 但 不 运转 即 备 用 ， (iii) 正在 
修理 , (iv) 等 候 修 理 . 系统 中 共有 N 部 机 器 . 至 多 有 M 部 正在 运转 , 且 至 多 有 R 部 正在 修理 . 

令 XX(t) 表示 在 时 刻 t 处 于 正常 状态 (运转 或 备用 ) 机 器 数 . 那么 (我 们 假定 ) 运转 机 器 数 
为 min{XX(t), M} 及 备用 机 器 数 为 max{0, 义 (t) 一 M1}. 而 失灵 机 器 数 为 Y(t) = N 一 X(t), 其 
中 正在 修理 的 为 min{Y (t), R}, 等 候 修 理 的 为 max{0,Y(t) 一 R}. 这 些 公 式 使 我 们 -一 旦 知道 
X(t) 即 可 确定 机 器 处 于 任何 状态 的 数目 , 三 区 是 一 生 灭 过 程 . 

(a) 试 确定 其 生 和 灭 的 参数 ，Xi 和 jui, i = 0,:…,N. 

(b) 分 别 就 情况 (a) R= M=N 和 (b) R=1,M = NN, 求 X(t) =j 的 平稳 概率 7 

30. ( 续 上 )(a) 在 及 < M = N 的 情况 下 求 其 平稳 分 布 . (b) 设 XN,r(o0) 表示 具有 (a) 中 
平稳 分 布 的 随机 变量 . 令 六 一 coco, 下 一 oo, 并 使 得 N/R 一 1 十 a, 其 中 a 是 固定 的 . 试 确定 
其 规范 化 常数 an ,bn 和 极限 分 布 钙 (z), 使 得 


lim Pr| oa) ew < = = $(z). 
N—0o0 bw 


(存在 两 种 情况 : (i) a > 和 Ap 和 (ia < Xp). 
31. 考虑 一 无 穷 小 参数 为 和 = Xn? 的 纯 生 过 程 , 此 处 , 入 > 0. 已 知 在 时 刻 0 有 一 粒子 ， 
试 求 , 
Plt)}=1- > P(t). 
k= 二 1 
32. 设 X(t) 为 一 Yule 过 程 , X(0) = N, 其 出 生 比 率 为 8. 试 证 明 


n—1 
n—l n—1— 
Pr{X(t) > nlX(0) = N} = >) ( jz 1 


其 中 gq=1-p=e 
附 1C 
汝 松 过 程 和 生 灭 过 程 在 诸如 排队 和 存储 模型 , 群体 增长 , 工程 系统 等 理论 和 应 
用 中 起 着 非常 重要 的 作用 . 关于 泊 松 过 程 以 及 与 其 有 关 过 程 的 初步 讨论 可 在 任何 一 
本 随机 过 程 教科 书 中 找到 . 
有 关 排 队 理 论 的 文献 相当 丰富 ， 总 结 这 方面 理论 及 其 应 用 的 一 本 优秀 专著 是 
Cox 和 Smitbh|1]. 


读者 也 可 参阅 高 级 著作 Tak&cs[2] 和 Riordan[3]. 
关于 排队 理论 的 概要 可 参看 Saaty[. 这 本 参考 书 还 包括 了 广泛 文献 目录 . 
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关于 堆积 理论 和 电话 系统 问题 的 应 用 可 见 书 Syski[5]. 
某 些 专门 的 排队 理论 数学 问题 论述 请 见 Beneg 的 专著 [6]. 
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第 5 章 更 新 过 程 


更 新 理论 始 于 研究 随时 间 变 化 而 不 断 更 新 的 随机 系统 , 它 在 每 次 更 新 之 后 依 统 
计 意 义 又 重复 原来 变化 过 程 . 目前 更 新 理论 着 眼 于 研究 一 列表 示 更 新 时 间 区 间 的 一 
般 独立 辣 分 布 且 非 负 随 机 变量 序列 . 它 的 结果 在 理论 和 实际 概率 模型 中 有 着 三 泛 的 
应 用 . 

本 章 的 前 6 节 是 必 不 可 少 的 , 它 包 含 在 每 一 本 导 引 性 教程 中 . 5.7 节 和 5.8 市 不 
太 困难 , 如 果 有 时 间 读 它 , 可 使 更 新 理论 的 基本 知识 得 以 完满 . 5.9 节 提 供 了 一 个 新 
近 有 趣 论题 的 轮廓 , 初次 阅读 可 从 略 . 


5.1 更 新 过 程 的 定义 和 有 关 概 念 


更 新 (计数 ) 过 程 {N(t),t > 0} 是 非 负 整数 值 随机 过 程 , 它 是 在 时 间 区 间 (0,4 
内 重复 试验 某 事件 陆续 发 生 的 次 数 , 而 这 些 相 继 “ 事 件 ” 发 生 的 间 阳 时 间 是 一 系列 
独立 同 分 布 正 的 随机 变量 记 这 一 舟 人 {Xk} !( 它 通常 表 


生 的 间隔 时 间 有 时 称 为 第 ; 个 更 新 闻 距 我 人 门 记 

F(x) = Pr{Xxr < zx}, k= 1,2,3,... 
作为 {Xk} 的 共同 概率 分 布 . 更 新 过 程 的 一 个 基本 规定 是 F(0) = 0, 这 意味 着 Xk 
是 正 随机 变量 . 我 们 记 


Sn 二 闫 1 十 Xo 十 :… 十 六 n， 7 之 1( 约 定 So = 0). (1.1) 
它 是 第 ”个 事件 出 现 之 前 的 等 候 时 间 . 因此 ( 见 图 5-1) 
N(t) = 使 0< 5 < 成 立 的 指标 的 数目 . (1.2) 


通常, 计数 过 程 {N(s),t > 0} 与 部 分 和 过 程 {Sn,n > 0} 都 称 为 “更 新 过 程 ” 
物理 上 原始 的 更 新 模型 是 一 系列 灯泡 替换 .一 个 灯泡 在 时 刻 0 被 安装 使 用 , 在 时 刻 
Xi 烧 坏 , 然后 换 上 一 个 新 的 . 第 二 个 灯泡 在 时 刻 Xi + X2 烧 坏 , 然后 换 上 第 三 个 灯 


泡 . 一 般 来 说 , 第 n 个 灯泡 在 时 刻 》、X; 烧 坏 , 然后 马上 替换 新 的 , 等 等 . 我 们 自然 


:二 1 
假定 这 些 灯泡 的 寿命 是 统计 独立 的 , 并 且 从 概率 意义 上 具有 相同 的 特征 , 即 
Pr{Xx < xr} = F(z). 
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XX 一 一 ?< 一 沪 一 站 一 一 一 着 一 一 | 一 一 [> 
站 3, 9 5, 
图 5-1 独立 同 分 布 随机 变量 序列 {X} 与 更 新 计数 过 程 Ntt) 之 间 的 关系 
显然 , 在 这 个 过 程 中 , N(t) 记录 下 至 时 刻 上 为 止 更 新 (灯泡 ) 的 数目 
更 新 理论 主要 目的 是 依据 事件 出 现 的 间隔 时 间 分 布 导出 与 {N()} 和 {Sn] 
相 联系 的 某 些 随机 变量 的 性 质 . 例如 很 有 意义 的 是 计算 在 时 间 区 间 (0, 引 内 更 新 数 
目的 期 望 值 
BEING = M(t) 称 为 更 新 函数 
为 此 , 一 些 有 关 的 关系 式 需要 介绍 . 原则 上 , Sa = Xi +… + Xs 的 概率 分 布 
Pr{Sn < 7} = Fn (7), 

可 利用 卷 积 公式 来 计算 , 其 中 Fi(z) = F(z) 假定 是 已 知 的 , 我 们 有 

Ply)= Fle -Wart) = Pole -Wary): 


前 面 我 们 曾 强 调 (1.2) 作为 过 程 {5,} 和 {和 N(t)} 的 联系 桥梁 . 关系 式 (1.2) 还 可 表 
示 成 形式 ; 


N(t) >k 当 且 仅 当 Sk < +t. (1.3) 
由 此 立刻 推 得 
Pr{N(t) > k}= Pr{Sk < t} (1.4) 
= F(t), t>0, k=1,2,..., 
因此 : 
Pr{N(t) = k}= Pr{N(t) > k} — Pr{N(t) > k++ 1} (1.5) 


= Ft) Foi(t), t20, k=1,2,.... 
1, 这 里 和 后 面 , 关于 积分 区 间 我 们 约定 只 包含 右 端 点 而 不 包括 左 端 点 , 即 
b 
/ “hl(g)dG(z) = / ~ p(s)dG(z). 
a a 二 
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由 定义 并 注意 到 (1.4、(1.5), 我 们 得 到 


M(t)= EIN(t)] = >_kPr{N(t) = &} 


k=1 


一 PrNd 之 kk} = Spr{S, <t= Slt) 
大 一 1 k=1 k=1 
(第 三 个 等 号 通过 分 部 求 和 推 得 , 也 可 参考 第 1 章 初等 问题 1). 级 数 
M(t) = YO Fl (19) 


天 一 工 
的 政 钱 性 将 在 5.4 节 中 证 明 . 
问题 3、 问 题 16 和 问题 17 涉及 N(t) 的 方差 和 高 阶 甜 . 
尚 有 一 些 其 他 有 趣 的 随机 变量 . 下 面 列 出 三 个 : 剩余 寿命 (也 称 为 剩余 随机 恋 
景 ), 现 龄 (也 称 为 现 龄 随机 变量 ) 和 全 寿命 . 其 定义 如 下 : 
% 二 SN(ty41 一 t (剩余 或 残留 寿命 ) 
0 = t — ON(t) ( 现 龄 或 现 龄 随机 变量 ) 
Be = Yt + or (全 寿命 ) 
这 些 随 机 变量 的 图 形 表示 见 图 5-2. 关于 这 些 随机 变量 在 更 新 过 程 理 论 和 实际 应 用 
中 的 基本 意义 , 本 章 后 面 将 予以 充分 说 明 . 


NO 


0 1 Mt Sw +] 


图 90-2 剩余 寿命 Yt 现 龄 Ot, 全 寿 傅 Be 


5.2 ”更 新 过 程 的 一 些 例子 


下 面 例子 表明 , 引起 更 新 过 程 的 范围 是 十 分 广泛 的 , 原因 是 多 种 多 样 的 . 其 中 几 
个 例子 在 后 面 几 节 将 会 被 深入 研究 
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(a) 泊 松 过 程 
参数 为 和 的 泊 松 过 程 {NN(t),t > 0} 是 更 新 计数 过 程 , 其 事件 出 现 间隔 时 间 服 
从 指数 分 布 ( 见 第 4 章 定 理 2.1) 


F(x)=1—-e **, 7z>0, 


170] 这 个 特殊 的 更 新 过 程 具有 许多 特别 性 质 , 将 在 5.3 节 中 对 此 作 详细 介绍 
(b) 计数 过 各 
相继 输入 到 记录 装置 (计数 器 ) 的 电 脉冲 或 信号 的 间隔 时 间 常 常 被 认为 构成 一 
个 更 新 过 程 . 大 部 分 物理 上 可 实现 的 计数 器 在 记录 一 个 脉冲 后 将 闭锁 一 段 时 间 , 在 
这 段 时 间 内 不 记录 到 达 的 其 他 脉 串 . 计数 器 仅 当 处 于 开放 ( 即 非 闭锁 ) 状态 时 才 记 
录 脉冲 .在 适当 假设 之 下 , 记录 脉冲 的 时 间 序列 构成 一 个 更 新 过 程 . 但 应 强调 指出 
记录 脉冲 的 更 新 过 程 是 二 级 更 新 过 程 , 它 是 由 所 有 到 达 的 脉冲 (其 中 包括 未 被 记录 


的 脉冲 ) 构成 的 原来 更 新 过 程 导出 的 . 5.3 节 与 5.7 节 将 详细 说 明 两 种 闭锁 类 型 的 计 
数 器 理论 , 即 所 谓 I 型 和 II 型 计数 器 . 


(c) 交通 流 


通常 假定 在 无 限 长 的 单行 公路 上 相继 行驶 汽车 之 间距 离 构成 一 个 更 新 过 程 . 相 
继 行 驶 的 汽车 经 过 一 个 固定 站 的 间隔 时 间 也 构成 一 个 更 新 过 程 . 
(d) 与 排队 联系 的 更 新 过 程 


在 单一 服务 的 排队 过 程 中 , 有 很 多 更 新 过 程 嵌 入 在 其 中 . 我 们 举 两 个 例子 
() 半生 到 这 时 何 构 成 一 个 更 新 过 得 ,3 那么 一 系列 服务 期 ( 即 忙碌 时 间 ) 的 
起 始 时 刻 构成 第 二 级 更 新 过 程 . 


Gi) 车 输入 过 程 (顾客 到 达 的 模型 ) 是 泊 松 的 , 服务 期 结束 时 刻 序列 也 是 一 个 更 
新 过 程 


(e) 存储 系统 


在 分 析 大 部 分 的 存储 模型 中 , 通常 假定 需求 模型 是 一 更 新 过 程 . 大 部 分 标准 存 
储 策略 可 归结 为 更 新 过 程 . 例如 , 进货 时 间 是 一 更 新 过 程 ( 见 5.8 节 ). 


(f) 与 独立 随机 变量 和 相 了 歌 系 的 更 新 过 程 


Gi) 设 和 co 是 一 列 实 值 (不 一 定 是 正 的 )i.i.d.( 独 立 同 分 布 ) 随机 变量 . 假 
设 E(&;) > 0. 考虑 部 分 和 Uo = 0, Un = 十 &2 十 … 十 m,n 之 1 其 值 域 为 实 直 线 
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定义 


91 = inf{n: U, > 0} 各 Sx = inf{n : U, > Us,_,},k = 2,3,.…, 
Xl1= 1 和 一 一 18 一 2 3 …. 


显然 , 序列 Xi X2,X3 构成 一 列 独 了 立 同 分 布 正 整数 值 随机 变量 .更 新 过 程 
Sm = XI 十 … 十 Xm,m 之 1, 可 解释 为 Un 相继 超过 它 前 面 最 大 值 的 时 间 (下 标 ). 换 
名 话说 , 在 这 些 时 间 形 成 了 一 列 新 的 最 大 值 . 

(i) 序列 {Us， 一 Us, ee | 是 一 个 ii.d. 正 随 机 变量 序列 , 因此 它 可 以 产生 
一 个 更 新 过 程 . 这 个 例子 在 独立 随机 变量 和 的 波动 理论 中 是 重要 的 ( 见 第 2 卷 第 17 
章 ). 
(g) 马尔 可 夫 链 中 的 更 新 过 程 

设 2o,21,… 是 明 退 的 马尔 可 夫 链 . 假设 Zo = i 并 考虑 相 邻 两 次 到 达 状 态 i 的 
间隔 时 间 . 具体 地 , 令 

Xi =min{n>0:2Zn 一 计 
和 
Xrt1 = min{n > Xk : Zn = i — Xk, k= 1,2,.…, 

由 于 它们 都 是 从 同一 初始 状态 开始 计算 , 马尔 可 夫 性 保证 了 X1, XX2,… 是 ii.d. 
随机 变量 序列 . 这 样 的 {Xk} 构成 一 个 更 新 过 程 . 这 个 事实 使 得 我 们 在 第 3 章 中 可 
以 应 用 更 新 理论 证 明 马 尔 可 夫 链 的 基本 极限 定理 . 
(h) 自然 嵌入 的 更 新 过 程 : 


日 然 典 入 的 更 新 过 程 可 以 在 很 多 应 用 概率 的 领域 中 出 现 , 包括 分 支 过 程 , 保险 
模型 , 群体 增长 现象 , 进化 遗传 过 程 , 工程 系统 , 经 济 结构 等 等 


5.3 “若干 特殊 更 新 过 程 的 补充 


A. 作为 更 新 过 程 的 泊 松 过 程 


如 前 所 述 , 参数 为 和 的 泊 松 过 程 是 更 新 过 程 , 其 事件 出 现 的 间隔 时 间 具 有 指数 
分 布 F(z) = 1-e-xz,z > 0. 指数 分 布 的 无 记忆 性 ( 见 4.2 节 ) 可 用 于 计算 若干 与 泊 
松 更 新 过 程 有 关 的 函数 

(i) 更 新 函数 

由 于 N(t) 具有 泊 松 分 布 


(Mre—*t 


Pr{N(t) = k} Er) 
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因此 
M(t) = EIN(t)] = Xt. 
(i) 剩余 寿命 
注意 到 在 时 刻 t 剩余 寿命 超过 z 当 且 仅 当 在 区 间 (t,t 十 z] 不 出 现 更 新 ( 见 图 


5-3). 因为 泪 松 过 程 具 有 平稳 独立 增 量 , 这 个 事件 与 在 区 间 (0,z] 没有 出 现 更 新 有 相 
同 的 概率 . 用 式 子 表达 , 我 们 有 


Pr{Yy > 2}= Pr{N(t+ 7) — N(t) = 0} 


= Pr{N(z) = 0} = ex (3.1) 
图 5-3 
这 样 , 在 泊 松 过 程 中 , 剩余 寿命 与 每 个 寿命 具有 相同 的 指数 分 布 
Pr{y < x}=1—e **, z>0. (3.2) 
方程 (3.2) 可 以 写 为 另 一 稍为 含糊 的 形式 
Pr{fy > zx}=1~ F(t), Tz>0, t>0. (3.3) 


在 5.8 节 中 我 们 将 看 到 这 个 恒等式 在 所 有 更 新 过 程 中 刻 划 了 泊 松 过 程 . 

(证 ) 现 蓉 

现 龄 4 上 自然 不 能 超过 也 而 对 于 z < 二 现 龄 超过 zx 当 且 仅 当 区 间 (t 一 x, 丰 不 出 
现 更 新 , 这 个 事件 的 概率 为 e-**. 因此 , 现 龄 遵循 截 尾 指数 分 布 


1—e-*?, 0O<zx<t, 
Prid: < 7z} = | 1 jw (3.4) 
为 了 后 面 使 用 方便 , 把 以 上 公式 写 为 
J 下 CD)，7Z<t 
Pr{ os < zx} = | 1 > (3.5) 


在 5.8 节 中 将 说 明 , 6 的 这 个 性 质 也 刻 划 了 泊 松 过 程 . 
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(iv) 全 奉命 的 均值 
利用 第 1 章 问 题 9 关于 非 负 随 机 变量 均值 的 计算 , 我 们 有 
ElB)= Ely| 十 五 [6 


-x+/ Pr{d: > x}dz 
A Jn 


注意 到 全 寿命 均值 显著 地 大 于 任 一 更 新 区 间 的 平均 寿命 1/ 和 = E[Xk]. 这 个 现 
象 当 t 较 大 时 , 即 过 程 已 经 持续 运行 一 段 长 时 间 之 后 , 尤其 令 人 惊讶 . 这 时 全 寿命 的 
均值 E(B:) 大 约 是 平均 寿命 的 两 倍 . 这 个 事实 似乎 有 点 荒废 . 

让 我 们 重新 检查 全 寿命 &. 的 定义 方式 , 并 直观 解释 上 述 的 矛盾 , 首先 t 为 一 个 
任意 固定 的 时 间 , 于 是 Bb 是 测量 包含 点 t 的 更 新 时 间 的 长 度 . 这 样 的 方式 显然 会 以 
较 大 可 能 性 有 利于 较 长 的 更 新 区 间 而 不 利于 较 短 的 更 新 区 间 ， 这 个 现象 就 是 所 谓 
的 “长 度 仿 位 抽样 ". 它 虽 然 很 隐蔽 , 但 在 多 次 抽样 下 即 会 呈现 . 

(V) Yt 向 的 联合 分 布 


确定 4 和 5 联合 分 布 的 方法 和 确定 5 分 布 类 似 . 事实 上 , 对 任何 z > 0 和 
0 <y<t, 当 且 仅 当 在 区 间 (t -~ y,t 十 2] 不 存在 更 新 时 , 事件 {Y > z,6 > 让 才 出 
现 , 其 概率 为 e-*^(*+). 这 样 ， 


eMz+y) ”车 z>0,0<y<t, 
0， 大 Yy>t. 


对 于 沾 松 过 程 , x 和 4 是 独立 的 , 因为 它们 联合 分 布 是 边缘 分 布 的 乘积 . 在 更 新 过 
程 中 这 个 性 质 也 刻 划 了 油 松 过 程 . 这 个 命题 已 收 在 本 章 末 问题 25 中 . 


B. 蔡 换 模型 


设 XX1,X2,… 表示 个 体 (灯泡 、 集 成 电路 块 和 机 器 等 ) 的 寿命 , 这 些 个 体 在 使 用 
中 相继 被 蔡 换 , 当前 面 一 个 个 体 坏 了 立即 换 上 另 一 个 个 体 开始 使 用 . 我 们 约定 {X;} 
是 具有 有 限 均 值 y = E[X&] 的 独立 同 分 布 正 随机 变量 序列 . 由 于 每 个 个 体 平均 持续 
4 时 间 单 位 , 我 们 希望 在 长 时 间 运 转 中 , 每 单位 时 间 平 均 替换 1/4 个 个 体 . 即 , 我 们 
希望 


Pr{Y > 7,6 >Y} = | (3.6) 


-MI ， 了 当 t oo (3.7) 


这 个 事实 将 在 5.4 节 论 证 . 
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在 长 期 运转 中 , 任何 在 个 体 损坏 之 前 就 被 蔡 换 的 策略 在 每 单位 时 间 使 用 的 个 体 
将 多 于 1/4. 然而 , 在 使 用 中 避免 损坏 在 经 济 上 有 好 处 , 元 部 件 往往 是 随 着 使 用 时 间 
( 依 龄 ) 而 退化 的 , 因此 考虑 选择 替换 策略 可 能 更 有 利 . 

一 个 个 体 或 损坏 或 到 达 某 使 用 时 间 工 , 无论 哪 一 个 先 出 现 就 被 替换 称 为 依 龄 适 
换 策略 . 直观 地 说 , 在 长 时 间 的 运行 中 , 由 于 损坏 (发 生 在 了 之 前 ) 被 替换 的 个 体 所 
占 比例 为 F(T), 而 对 应 于 在 了 时 刻 被 蓉 换 的 个 体 (想象 并 不 太 昂贵 ) 所 器 比例 为 
1 一 F(T). 对 于 这 个 依 龄 车 换 策略 模型 , 更 新 间距 显然 服从 分 布 律 


F(z), 7z<T, 
] ， T 之 了 


Fr(z) 一 | 
其 平均 更 新 间距 为 
Oo 1 
br = / {1 — Fr(x)}dz = / {1— F(z)}dr < 


用 导出 关系 式 (3.7) 相同 的 理由 可 证 明 长 期 运行 中 平均 替换 率 递增 趋向 于 1/4j. 
现在 令 了 ,72,… 表示 个 体 真正 相继 损坏 的 间隔 时 间 . 随机 变量 妈 是 由 随机 数 
个 长 度 为 工 的 时 间 区 间 (对 应 于 与 损坏 无 关 的 替换 ) 加 上 最 后 的 时 间 区 间 段 组 成 ， 
最 后 时 间 区 间 段 的 分 布 是 在 了 前 损坏 的 条 件 下 的 损坏 分 布 , 即 员 具有 NT +2 的 
分 布 , 其 中 
Pr{N > k} = {1 ~ F(T)}®, k = 0,1,... 
且 
Pr{Z < 2}= F(z)/F(T), Ogz<gT. 
因此 ， 


T 
EY = Fer {TL F(T)+ / (F(T) - F(z)dz) 


T 
_ i / {1 — F(z)}dz. 


个 体 真正 损坏 的 间隔 时 间 随 机 变量 序列 {Yi} 产生 一 个 更 新 过 程 , 在 长 期 运行 中 , 每 
单位 时 间 平 均 损坏 率 是 1/E[Yi]. 这 个 结论 仍然 是 依据 导出 关系 式 (3.7) 的 相同 理由 . 
由 于 E[Yi] 依赖 于 F, 依 龄 替换 策略 的 损坏 率 1/E(Y1) 可 能 小 于 仅 当 损坏 时 才 替 换 
的 损坏 率 1/y. 

在 下 面 情况 可 考虑 使 用 整体 替换 策略 , 若干 个 元 件 任何 时 刻 都 同时 使 用 , 同时 
更 换 所 有 的 元 件 要 比 个 别 地 替换 元 件 在 经 济 上 更 节约 . 整体 替换 要 求 , 或 者 替换 个 
别 损 坏 的 元 件 或 者 在 时 刻 T,2T, 37, … 替换 所 有 元 件 . 从 而 , 在 每 个 工 单位 时 间 进 
行 一 次 有 计划 的 或 整体 的 替换 和 (平均 )M(T) 次 损坏 替换 . 这 样 , 长 期 运行 中 每 单 
位 时 间 更 换 次 数 是 (1L+ M(T))/T. 可 把 它 与 其 他 车 换 策 略 相 比 较 . 
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C. 计数 器 模型 


计数 器 是 探测 和 记录 瞬时 脉冲 信号 的 仪 锅 .Geiger-Mnujller 计数 惕 就 是 大 家 熟 
悉 的 例子 , 它 是 探测 大 气 层 字 宙 幅 射 或 者 有 源 幅 射 , 例如 由 一 块 镭 放 射出 来 的 射线 . 
男 一 个 例子 是 电子 扩 程 屁 . 

所 有 物理 上 可 实现 计数 加 都 是 不 完善 的 , 元 能 力 检测 进入 仪器 的 所 有 信号. 当 
一 个 粒子 或 信和 号 被 记录 下 来 以 后 , 计数 器 必须 恢复 到 原来 状态 以 准备 记录 下 一 个 信 
号 . 在 仪器 调整 时 间 ( 称 为 闭锁 时 间或 断 开 时 间 ) 到 达 的 信和 号 无 法 记录 . 我 们 必须 区 
分 到 达 的 粒子 和 被 记录 的 粒子 . 仪器 仅 能 探测 被 记录 的 粒子 . 人 们 希望 由 此 推断 到 

假设 粒子 或 者 信号 到 达 的 过 程 是 更 新 过 程 ， 其 间隔 时 间 为 Xi1, X2,…, 上 且 
Pr{Xk < zj = F(z)， 计 数 器 模型 依 机 构 闭 锁 时 间 的 种 类 的 差别 而 不 同 ， 下 面 我 
们 讨论 其 中 最 普通 的 两 种 类 型 . 

] 型 计数 妖 

一 个 粒子 在 时 刻 0 到 达 , 并 且 使 计数 器 闭锁 一 段 时 间 页. 第 一 个 被 记录 的 粒 
子 是 在 时 刻 到 之 后 到 达 的 第 一 个 粒子 . 由 于 记录 粒子 , 计数 器 闭锁 , 其 时 间 长 度 为 
2 于 一 次 被 记录 的 粒子 是 在 计数 器 开放 以 后 到 达 的 第 一 个 粒子 . 这 个 过 程 不 断 
重复 , 其 中 相继 财 锁 时 间 记 为 矶 ,7 Ya,…, 假定 它们 是 独立 的 且 具 有 相同 的 分 布 
Pr{Y < y= G(y), 并 上 且 与 到 达 过 程 {Xk} 互相 独立 . 

令 Z1 表示 直到 第 一 个 信号 (不 计算 在 时 刻 0 到 达 的 一 个 ) 被 记录 的 时 间 , 令 
2 = 2,3.… 表示 第 n 一 1 次 记录 和 第 nn 次 记录 之 间 的 时 间 间 距 . 由 于 过 程 在 每 次 
记录 后 又 重新 开始 , 所 以 {2%} 构成 一 个 更 新 过 程 . 以 上 所 述 的 情况 如 图 5-4 所 示 . 

连续 闭锁 时 间 


7 Y, 上 
到 达 过 程 
A A, A 


记录 过 程 一 一 一 沾 一 2 一 小 一 


图 54 工 型 计数 器 , 。 表 示 未 被 记录 的 信号 , 。 表示 被 记录 的 信和 号 
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受 图 5-4 的 启发 , 知道 2 是 i 加 上 在 六 的 剩余 寿命 , 或 
1 = 二 + = ONGY)+1 


其 中 Sk = Xi 十 半 2 十 … 十 Xk. 
由 于 过 程 {X%} 和 {Yh} 是 独立 的 , 借助 于 全 概率 公式 我 们 得 到 


Pr{(z. < +}= 人 Ppr{y+% < zl = WdGy) 
- / {1 — As_y(y)}dG(y), 


其 中 hy(t) = Pr{Y > 2}. 

Az(t) 的 显示 公式 可 从 后 面 方程 (6.1) 得 到 , 所 以 工 型 计数 器 计数 间 隅 时间 的 分 
布 是 完全 确定 的 . 

在 长 时 间 运 行 中 , 每 单位 时 间 内 平均 记录 1/B(21) 个 粒子 , 而 平均 到 达 1/E[X1] 
个 粒子 . 后 面 我 们 会 说 明 , 在 长 期 运行 中 , 在 所 有 到 达 粒 子 中 被 记录 粒子 的 比例 是 

178| E[X1]/E[Z. 

当 到 达 过 程 是 参数 为 和 的 泊 松 过 程 时 , 事件 出 现 的 间隔 时 间 的 指数 分 布 无 记忆 

性 告诉 我 们 , x 遵循 指数 分 布 且 与 t 无 关 . 这 样 , 在 泊 松 情况 下 ， 


Pr{iZi < 2} = 人 G(z —y)Me "Ydy. (3.8) 


IE 型 计数 器 


这 里 的 闭锁 机 制 更 加 复杂 . 如 前 , 一 个 输入 信和 号 被 记录 当 且 仅 当 该 信号 是 在 计 
数 器 开放 时 间 到 达 ， 然 而 在 前 面 例子 中 只 有 被 记录 的 粒子 能 使 计数 器 闭锁 ， 对 于 
I 型 计数 器 , 每 个 到 达 的 信号 都 能 延长 计数 器 闭锁 时 间 , 相连 结 的 闭锁 时 间 同 时 登 
加 起 来 . 例如 , 假设 第 一 个 粒子 闭锁 计数 器 的 时 间 长 度 为 ci, 而 第 二 个 脉冲 在 时 间 
T < oi 到达. 并 独立 造成 长 度 为 oa 的 闭锁 时 间 , 那么 计数 器 下 次 开放 时 间 是 在 时 
刻 ol 或 +c2, 无 论 哪 种 情况 出 现 , 我 们 都 应 假定 在 此 时 刻 之 前 没有 另外 粒子 到 
达 !. 这 个 过 程 的 一 个 典型 实现 如 图 5-5 所 示 . 

如 I 型 计数 器 , 设 2 是 第 n 一 1 次 被 记录 脉冲 和 第 n 次 被 记录 脉冲 之 间 的 时 
间 长 度 , {2Zx} 也 是 一 个 更 新 过 程 . 

对 这 种 计数 器 过 程 进行 一 般 分 析 是 十 分 困难 的 , 在 到 达 过 程 是 参数 为 和 的 沾 松 
过 程 的 假设 之 下 , 我 们 得 出 一 些 结果 . 

1. 应 假设 在 此 时 刻 之 前 没有 别 的 粒子 到 达 或 到 达 粒 子 所 造成 的 闭锁 时 间 在 时 刻 ol 或 7 十 o2 之 前 结 

束 ， 一 一 译 者 注 
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图 5-5 II 型 计数 器 ,。 表示 未 被 记录 的 信号 ，。 表示 被 记录 的 信号 
设 p(t) 是 计数 器 在 时 刻 t 开放 的 概率 . 我 们 下 面 曾 明 


po) =exp{ -a / -Gav} (3.9) 


其 中 G(y) = Pr{os < 做 . 为 了 导出 这 个 公式 , 回忆 第 4 章 定 理 2.3, 已 知 泊 松 过 程 
在 时 间 区 间 (0, 丰 出 现 n 次 , 其 出 现时 间 的 分 布 相当 于 从 (0, 引 上 均匀 分 布 的 总 体 
中 抽取 出 的 n 个 独立 随机 变量 的 分 布 . 计数 器 在 时 刻 t 是 开放 的 , 当 且 仅 当 由 这 n 
个 信号 产生 的 所 有 闭锁 时 间 在 时 刻 t 之 前 结束 一 个 闭锁 时 间 区 间 从 时 刻 y 开始 
在 时 刻 t 前 结束 的 概率 是 G(t - ). 倘若 一 个 信号 在 时 间 区 间 (0, 引 内 出 现 , 它 的 
实际 到 达 时 间 具 有 均匀 分 布 . 因此 由 它 导致 的 闭锁 时 间 在 时 刻 之 前 结束 具有 概率 
[ G(t -yjdy/t. 由 于 闭锁 时 间 假定 是 独立 的 并 且 与 到 达 过 程 无 关 , 我 们 有 


Pr{ 计 数 器 在 时 刻 t 开放 In 个 信号 出 现在 (0 让 
一 {/ G(t— ydy}” 


但 信号 在 时 间 区 间 (0,4] 到 达 的 数目 具有 均值 为 At 的 泊 松 分 布 . 借助 于 全 概率 公 
式 , 我 们 得 到 


OO 


)=> {/ Glt -Widy) ee -ee 


7 二 0 


=exp1 一 | 1 po Gl(t — jl) 


-人 -coley} 
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公式 (3.9) 得 证 . 

继续 假定 信和 号 流 是 泊 松 的 , 记 MR(t) 为 在 (0, 上 被 记录 信号 的 平均 数 , 则 p(#) 
与 Ma(t) 有 关 . 我 们 证 明 

dMal(t) 
dt 

为 证 明 上 式 , 首先 阐述 下 面相 关 论 崭 . 

信和 号 出 现在 区 间 (t,t + 及 的 概率 是 和 Ah 十 o(h)， 由 定义 , 在 相同 的 短 时 间 区 间 
里 发 现 计 数 器 开放 的 概率 为 p(t) + olh). 所 以 除了 ol(h) 项 外 , 和 hp(t) 是 某 个 信号 在 
(bt 十 六 被 记录 的 概率 . 既然 在 时 间 区 间 (t,t 十 及 出 现 至 少 两 个 信号 的 概率 是 oj 
我 们 有 


= Ap(t). (3.10) 


Mae(lt + h) = Mal(t) + Ahp(t) + o(h), 
其 中 olh) 合并 了 所 有 可 忽略 的 项 . 则 


dMa(lt) ) M(t+h)— Mae(t) 
dt 二 增 = Np) 


此 即 (3.10). 
注意 , 由 其 原意 , Mk(0) = 0. 现在 结合 (3.9) 和 (3.10), 然后 求 积分 得 


Malt) = = sow { - 和 人 上 一 CU )ldy }ds (3.11) 
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A. 更 新 函数 
在 5.1 节 中 我 们 导出 在 (0, 丰 上 平均 计数 次 数 的 公式 : 
M(t) = EIN(t)] = 2_, F(t), (4.1) 
一 
其 中 
F(t) = Pr{S; < t}, t>0. 
由 于 它 的 深刻 含义 及 关系 已 超过 它 作 为 平均 计数 次 数 的 解释 人 们 给 予 M 提 一 个 
专门 的 名 称 一 一 更 新 函数 
1. 一 些 作者 曾 试图 定义 含 原点 的 更 新 过 程 , 并 定义 更 新 函数 为 1 十 MO = 已 1+ 和 NG] = > Fn(t), 


其 中 Fo(t) = 1 对 于 上 > 0, 其 他 为 0. 这 个 定义 可 简化 某 些 公式 , 但 在 勒 员 格 - 斯 带 尔 切 斯 积分 理 
论 方面 要 麻烦 些 . 
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我 们 的 第 一 件 事 是 说 明 , 对 于 每 个 上 > 0, M(t) 是 有 限 的 . 为 此 , 首先 根据 定义 
和 Fj(z) 的 单调 性 , 推出 不 等 式 


F(t) = 人 Fm(t— EdFnE) Tn,t), lgmn~-1. 
0 
特别 , 对 任何 整数 k,r 和 n, 我 们 有 
Fnr+rlt) < Fn-_Drtik(t)Fr (t). 
直接 迭代 导出 关系 式 


Friplt) < [FORE), Og<kSr-l. (4.2) 


由 于 (4.2), 可 见 车 存在 7, 使 得 F(t) < 1, 则 级 数 M(t) = 》 到.(t) 收敛 , 并 至 少 依 
天 一 1 

几何 级 数 速度 收敛 . 

因为 X; 是 正 随机 变量 , 所 以 F(0+) = 0, 从 而 存在 某 个 正 数 如 使 得 F(to) < 1， 
由 此 可 归纳 地 推断 对 于 每 个 t > 0, 必定 存在 7 满足 五 由 < 1. 这 个 事实 从 概率 意 
义 考 虑 是 直观 的 , 并 且 等 价 于 如 下 命题 : 独立 同 分 布 正 随机 变量 序列 的 部 分 和 Sn 
以 概率 1 递增 趋向 于 无 限 . 

由 前 面 的 讨论 引出 两 个 重要 的 推论 , 为 便于 引用 , 现 列 在 下 面 : 

对 任意 固定 t 


所 (t) 一 0， 当 n 一 00 (至 少 以 几何 级 数 速 度 收 敛 )， (4.3) 


M(t) < oo0， 对 所 有 t. 
显然 , 由 其 意义 (或 由 公式 (4.1))M(t) 是 关于 + 的 不 减 函数 . 此 外 , 易 验 证 M(t 
是 右 连 续 的 (由 于 每 个 及 人 划 具有 这 个 性 质 并 且 级 数 在 有 限 区 间 一 致 收敛 )， 这 样 
M(t) 有 分 布 函数 的 特征 , 只 不 过 M(co) = lim Mb) 关 1 (实际 上 , M(o0) = oo). 从 
而 可 以 与 / a(t 一 dF(y) 平行 地 定义 表达 式 / a(t -ydM (y). 特别 , 当 M 可 微分 
时 , 车 m(t) = dM()/dt, 则 积分 / alt -ydM(y) 简化 为 / alt — ym(y)dy. 


在 此 观点 之 下 , 我 们 可 推广 卷 积 的 概念 至 任何 两 个 增 浮 数 . 设 4 和 B 是 不 碱 、 
右 连 续 函 数 , 且 4(0) = B(0) = 0. A 和 B 的 卷 积 , 记 为 A4* B, 定义 如 下 ， 


A* B(t) = [ Bl(t — ydA(y), t+ 之 0. (4.4) 
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1— 
由 于 B(0) = 0, 我们 有 B(t 一 = / "4B(z). 把 此 式 代入 (4.4), 改变 积分 的 顺序 


得 
ArB0= 人 { /Baag 


_ / { / dA(y) dB(z) 


= B+x A(t), 


因此 “*” 是 一 个 可 交换 运算 . 
现在 我 们 证 明 更 新 函数 M(t) 满足 方程 


MO = FO+ { MG -Warly) t > 0, 


或 以 卷 积 记号 记 为 
M(t)= F(t)+F*M(t), t>0. (4.5) 
这 个 恒等式 借助 于 更 新 论证 法 得 以 证 实 . 该 方法 是 通过 假定 第 一 次 更 新 的 时 间 为 


X1, 然后 计算 更 新 的 期 望 数 .显然 , 过 程 的 概率 结构 在 时 刻 Xi 之 后 又 重新 开始 ， 
因此 


0, 车 zx>t 


slvgpa =a =| 1+ M(t—7) 各 了 七 二 


换 句 话说 , 如 果 第 一 次 寿命 X!1 超过 t, 则 在 区 间 (0, 二 没有 更 新 . 另 一 方面 , 当 X1 = 
x <t, 在 z 处 存在 一 次 更 新 并 在 (x,4] 按 平均 意义 有 ML- z) 次 更 新 . 应 用 全 概率 
公式 有 

M(t = EIN(t)] 


- / 万 LN 人 | 和 = zldF(z) 
一 ja + M(t— Zz)}dF(z) 
= F(t)+ / M(t ws)dF(z) 


于 是 关系 式 (4.5) 得 以 证 实 . 
更 新 理论 的 许多 活力 均 源 于 上 述 的 推理 方法 , 即 研究 从 第 一 个 “事件 ”出 现 的 
时 刻 重新 开始 的 动态 更 新 过 程 . 
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B. 更 新 方程 
以 下 形式 的 积分 方程 


A(t) = a(t) + 人 4( 一 Z)idF(z)，t>20， (4.6) 


称 为 更 新 方程 . 其 中 a(t) 和 分 布 函数 F(t) 是 已 知 的 , 而 未 知 量 为 A(t). 
者 无 不 明确 , 我 们 将 使 用 记号 B* C(t) 表示 函数 C(t)( 假 定 适当 光滑 且 在 有 限 
区 间 是 有 界 的 ) 与 右 连续 增 函 数 B(t) 的 卷 积 , 其 中 B(0) = 0, 用 式 子 表达 如 下 : 


B*xC(t) = / C(t—7T)dB(7). (4.7) 
大 B'(t) = b(t) 存在 , 则 (4.7) 可 化 为 
Bx*C(t) = [ C(t — 7)b(T)d7, 


这 里 , 假设 后 面 的 积分 在 通常 意义 下 存在 . 关于 B*C 一 些 初等 性 质 我 们 列 出 下 面 
几 笨 以 供 参 考 , 它们 的 证 明 比较 容易 , 留 给 读者 自己 完成 . 

() mes 1(B* C)G|< mag |C(O|. B(T) (也 可 参考 下 面 (4.11)) 

(ii BxCi+B#*C2= Bx*(C+ C2); 

(iii) 如 果 Bi 和 Bz 是 递增 的 , 则 


Bi#*#(B2*C)= (Bi* B2)*C. (4.8) 


比较 (4.6) 与 (4.5), 得 知 更 新 函数 M(t) 满足 当 alt) = F(t) 时 的 更 新 方程 , 下 
面 定理 断言 一 个 任意 更 新 方程 的 解 可 以 用 更 新 函数 来 表示 . 


定理 4.1 假设 a 是 有 界 沙 数 , 则 存在 唯一 的 一 个 函数 4, 它 在 有 限 区 间 是 有 


界 的 , 并 且 满 足 
A(t) = a(t) + / A(t — ydF(y). (4.9) 
这 个 函数 是 


A(t) = alt) + | altt ~ z)dM (zx), (4.10) 


其 中 M(t) = 》 Fi(t) 是 更 新 函数 


k=1 


i# 
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证 明 ”我们 首先 证 明 由 (4.10) 确定 的 函数 4 满足 所 要 求 的 有 界 性 并 且 实 际 上 
就 是 (4.9) 的 解 . 因为 a 是 有 界 函 数 而 M 是 不 减 和 有 限 的 , 对 每 个 男 定 了 推 得 


1 
sup LIE sup la(O)|+ / {sup_la(WI}daM (a) 
Ogte&T Ot<T 0 OyET (4.11) 
= sup Ja(t)H{1+ M(T)} < o0, 
Ot<T 


这 就 证 明了 表达 式 (4.10) 在 有 限 区 间 是 有 界 的 . 为 检验 (4.10) 的 A(t) 满足 (4.9), 我 


们 有 
A(t)= a(t)}) + M * alt) 
= a(t) + (> 及) ka 人 
k=1 
a(t)+F*a(t)+ >_F * a(t) 
k=2 


=a(t) + FP*{a(t) + (DF) *al(d) | (因为 Fe =F* Fi 并 利用 (4.8)) 
k=1 
~ a(t)+ FPF*A(t). 


为 完成 定理 4.1 的 证 明 , 接 下 来 是 验证 4 的 唯一 性 . 这 只 须 证 明 更 新 方程 (4.9) 
的 任何 解 在 有 限 区 间 是 有 界 的 , 可 用 (4.10) 表示 即 可 . 

为 此 , 注意 到 更 新 方程 (4.9) 适 于 使 用 逐次 通 近 法 , 将 4(t) 的 表达 式 重 复 代 入 
(4.9) 的 右边 , 并 适当 地 展开 . 我 们 利用 卷 积 的 记号 实现 这 个 步骤 . 把 (4.9) 缩写 成 


A=a+F*A 
把 4 代入 到 上 式 右 边 , 得 


A=a+F+*(at+F*A4) 
=a+F*at+F*(F*A) 
=Q4 十 玉 *a 十 本 +*4 (由 于 恒等式 Fo = 下 * 耳 )， 


这 里 , 心照 不 宣 地 利用 了 性 质 (4.8). 我 们 重复 这 个 步 又 , 得 到 等 式 
A=a+F*a+F*(a+F*A4) 
=0 Fx*a+ Fo*ai+ Fa*A=.: 


-ot (TDR) at Brh 
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其 次 , 注意 到 
Fa A =| | A wars ly) 
<{ sup IA — WI x Fld) 


既然 4 在 有 限 区 间 是 有 界 的 , 并 且 lim Fa(t) = 0( 参 考 式 (4.3)), 由 此 推 得 对 每 个 
固定 上 有 lim | 及 * 4(| = 0. 类 似 地 , 由 于 a 有 界 , 得 


am a ( 3 及 * a(t) = (> 及 ) *a(t) = M *a(lt). 
同样 ， 


全 一 ] 


A(t) = a(t) + im Peal) + * At) 


k=1 
= a(t)+ M *at(t), 


故 方程 (4.9) 的 一 般 解 4 具有 表达 式 (4.10). 这 就 完成 了 定理 4.1 的 唯一 性 证 明 . 于 
痛 助 于 定理 4.1, 我 们 来 证 明 重 要 关系 式 


E[SN(t)41) 二 [Xi 十 关 2 十 .十 XN(t)+1) 
= E[X1]: EIN(t) +1] (4.12) 
= ElX1]: [M(t) +1), 


初 看 起 来 , 这 个 恒等式 有 点 像 第 1 章 所 导出 的 一 个 恒等式 , 后 者 表明 若 XX1 ,Xo, XX3,… 
是 独立 同 分 布 随机 变量 序列 . N 是 与 X; 无 关 的 整数 值 随机 变量 , 且 它 们 的 均值 都 
存在 , 则 等 式 E[Xi 十 … 十 Xn] = 五 Xi] EIN] 成 立 . 等 式 (4.12) 与 此 式 子 关键 差 
别 在 于 求 和 数目 N(t) 十 1 不 独立 于 被 加 项 . 例如 , 回忆 在 5.3 节 讨 论 的 泊 松 过 程 , 全 
寿命 5. 是 含 于 SNtt)+1 的 最 后 被 加 项 , 当 上 足够 大 时 其 均值 大 约 是 无 条 件 均值 的 两 
倍 . 由 于 这 个 理由 , 把 EISwt)] 作为 BE[X1] 和 五 [NOG] 的 乘积 来 求 值 是 不 正确 的 . 鉴 
于 这 些 引 以 为 诚 的 说 明 , 等 式 (4.12) 更 加 有 意思 . ( 它 实 际 是 著名 的 Wald 恒等式 的 
一 个 特别 情况 , 可 参考 第 6 章 有 关 部 分 .) 

为 了 导出 (4.12), 我 们 利用 更 新 论证 法 构造 关于 A(t) = 五 [Swo+i] 的 更 新 方 
程 . 照例 , 我 们 假设 第 一 次 更 新 时 间 是 Xi = zx, 然后 区 别 两 种 可 能 性 : 第 一 种 情况 
是 x>t, 所 以 N(t) =0 并 且 Snty+i = z, 第 二 种 情况 是 z < .通过 对 所 包含 的 量 
直接 解释 易于 验证 等 式 : 


若 人 xX>4 


ElS 及 ] 一 
[SN 1 = 2] = 1 z+ A(t— 7)， 若 了 区 不 
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其 次 , 援引 全 概率 公式 得 
A(t)= ElSN(t)+1| 
-| ElSn(y+1|X1 = zdF(z) 
一 fe 十 4 人 一 Z)]dF(z) 十 三 2ZdF(Z) 
0 t 
-| rdF'(z) +/ A(t — zr)dF(7) 
二 五 |X1] 十 / A(t — 7z)dF (7). 
这 样 A(t) = ELSw(y+1] 满足 更 新 方程 , 其 中 a( = 常数 E[Xi]. 定理 4.1 说 明 
A(t) = a(t) 十 [ att — z)dM (zx) 
0 
= BX + | ELClaM(o) 
187 一 五 [Xi x {1+ M(t)), 


由 此 证 明了 (4.12) 
注意 到 剩余 寿命 Y = SN()41 一 t 有 


Elyx] = EIX1: (1 + MO —t. (4.13) 


在 5.3 节 中 多 次 使 用 了 直观 结果 M(t)/t 一 1/4, 一 oo 其 中 以 = EIX1. 现在 
我 们 已 能 充分 证 明 这 个 重要 论断 , 它 通常 被 看 作 是 初等 更 新 定理 
定理 4.2 设 {Xi} 是 更 新 过 程 , 1 = E[X1] < oo, 则 
,1 1 
A tM pp 
证 明 ”由 于 情况 上 < SN(y+1 总 是 成 立 的 , 结合 等 式 (4.12), 我 们 有 
t < ElSw(w+1] = tll + M()), 


因此 


由 此 推 得 
(4.14) 
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为 了 构造 相反 的 不 等 式 , 令 c > 0 是 任意 选 定 的 , 置 


c 人; 着 XX; < 0C 
A — 
C, 大 Xi; > C 


并 考虑 具有 寿命 {Xf?} 的 更 新 过 程 . 
令 Ss 和 Ne(t) 分 别 表示 由 {Xf} 产生 的 截 尾 更 新 过 程 的 等 候 时 间 和 计数 过 程 
由 于 随机 变量 Xf 一 致 有 界 于 c, 易 知 有 t+ ec > Su ,in 所 以 
1 十 C 之 五 [5NeH 二 三 大和 二 MO 
其 中 | 
we = EX9] = | {1 ~ F(z)}dz, 
有 
M°(t) = 百 Ne 人 ] 
显然 , 由 < Xi, 可 知 N°(t) > N(t), 因而 M°(t) > M(t). 由 此 推 得 


t+c> pll+ M(t)), 


重新 整理 上 式 得 | | 1 ，， 
iM() < e+ i( 去 -1). 
因此 对 任意 c>0 有 | | 
由 于 ， 
dm 4 = lm / 1 ~ Fz)lds 
= / 1 — F(z)}dz = 4, 

而 式 (4.15) 的 左边 部 分 是 固定 的 , 由 此 我 们 推出 

lim sup -MI < lim = - 了 (4.16) 


结合 不 等 式 (4.14) 和 (4.16) 得 
Jim -M (t) = 了 


从 而 定理 证 毕 . 时 
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5.5 更新 定理 


本 节 的 主题 是 介绍 应 用 概率 论 中 的 一 个 非常 基本 的 定理 即 更 新 定理 .此 定理 
改进 了 由 定理 4.2 所 构造 的 渐 近 关系 式 M(t) ~ t/p,t = oo 

更 新 定理 可 理解 为 极限 公式 lim M(t)/t = 1/4 的 微分 形式 . 明确 而 言 , 倘若 对 
F(z) 附加 一 些 适当 条 件 , 则 由 更 新 定理 可 断言 , 对 任意 hh>0 有 


MU 月 一 MG - wt oo (5.1) 


换言之 , 当 过 程 经 过 很 长 一 段 时 间 , 在 长 度 为 疡 的 区 间 上 更 新 次 数 的 期 望 值 近似 于 
h/1. 虽然 定理 5.1 的 结论 有 多 种 形式 , 但 都 等 价 于 (5.1), 它 不 仅 提供 了 应 用 更 新 定 
理 的 方便 形式 . 此 外 , 更 新 定理 在 确定 更 新 方程 解 的 渐 近 特征 时 有 着 重要 作用 . 

更 新 定理 的 证 明 比 较 元 长 但 又 是 必要 的 . 我 们 略 去 其 细节 部 分 , 并 推荐 读者 参 
看 Feller[1] 以 了 解 证 明细 节 过 程 . 然而 , 我 们 将 相当 用 心地 氢 述 以 使 得 读者 能 理解 
它 的 意义 , 并 能 迅速 和 准确 地 应 用 它 . 在 随后 各 节 里 有 大 量 应 用 , 基本 更 新 定理 的 
含义 将 变 得 更 加 清楚 易 懂 . 为 了 叙述 准确 , 我 们 需要 几 个 预备 定义 . (只 对 应 用 感 兴 
趣 的 读者 可 粗略 阅读 本 节 后 面 内 容 ). 

定义 5.1 点 a 称 为 分 布 函数 下 的 增 点 , 如 果 对 任意 正 数 e 有 


F(a 十 E) 一 下 (a 一 E) > 0. 


分 布 函数 称 为 是 算术 的 , 如 果 存 在 一 个 正 数 入 使 得 F 的 增 点 仅仅 出 现在 点 0, 土 入 
土 2 入,… 之 中 , 具有 此 性 质 的 最 大 和 称 为 的 跨 距 . 

有 连续 部 分 的 分 布 函数 FF 不 是 算术 的 . 具有 可 能 值 0,1, 2,… 的 离散 随机 变量 
的 分 布 函 数 是 算术 的 并 且 跨 距 为 1. 

定义 5.2 ” 设 9 是 定义 在 [0,co) 上 的 函数 . 对 每 个 正 数 5 和 n= 1,2,…, 令 


m, = min{g(t)} : (n ~ 1)6 < t < no}, 
Nin = max{g(t) : (n — 1)6 < t < ned}, 


0(6)=56 》 mn， 和 于 (0) 二 5 》 而 ". 
n=1 


n= 二 1 


如 果 级 数 c(6) 和 5(6) 对 每 个 6 是 绝对 收敛 的 , 并且 当 6 一 0 时 , 差 5(6) -5(0) 起 
向 于 0, 则 称 9 为 直接 黎 委 可 积 的 . 
每 个 单调 函数 9 者 在 如 下 意义 下 绝对 可 积 


/ gldt< oo (5.2) 
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则 必定 是 直接 梨 没 可 积 的 . 这 对 于 我 们 而 言 是 最 重要 的 情况 . 显然 , 所 有 满足 (5.2) 
的 单调 函数 的 有 限 线性 组 合 也 是 直接 黎 曼 可 积 的 . 

定理 5.1( 基 本 更 新 定理 ) 设 FF 是 均值 为 y 的 正 随机 变量 的 分 布 函数 . 设 是 
直接 黎 曼 可 积 的 , 4 是 更 新 方程 


A(t) = a(t) + / A(t — z)dF(z). (5.3) 


的 解 
(i) 如果 FF 不 是 算术 的 , 则 


1 OO 

一 dz, < 00, 
lim A(t) = | atz)dz， 右 上 < cc 
0, 大 上 二 00. 


(i) 若 下 是 算术 的 且 跨 距 为 和, 则 对 所 有 0<c< 入 有 


入 OO 

~ 》 a(c 十 mA)， 咎 凡 < co 
im 4tc + nA) 一 H n=0 

0 茶 /= oo. 


该 定理 有 另 一 叙述 形式 , 它 等 价 于 上 述 刚刚 给 出 的 形式 , 但 更 为 直接 地 利用 了 
更 新 晒 数 , 设 h >0 是 已 知 的 , 在 方程 (5.3) 中 特别 指定 


1， 大 0<y<h, 
a(y) = 
0， 帮 h<y. 


对 于 t > ,由 于 (4.10), 故我 们 有 


并 且 ja / “a(z)az = h/n. 如 果 下 不 是 算术 的 , 我 们 可 根据 更 新 定理 推 得 
lim [M(t) — M(t — A)] = h/p (5.4) 


这 里 约定 当 =o0 时 ,有 h/p=0. 
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反之 , 用 阶梯 函数 逼近 直接 黎 曼 可 积 , 定理 (5.1) 即 可 由 式 (5.4) 推出 . 更 新 定 
理 的 第 二 种 形式 的 严格 叙述 如 下 : 


定理 5.2 ” 设 下 是 均值 为 y 的 正 随机 变量 的 分 布 函 数 . 令 M(t) = 》 F(t) 
k 二 1 


是 关于 下 的 更 新 函数 . 设 h > 0 是 固定 的 . 
(i) 如 果 下 不 是 算术 的 , 则 


lim [M(t + h) — M(t)] = h/n. 


(ii) 如 果 FF 是 算术 的 , 且 h 是 跨 距 和 的 倍数 , 则 上 述 极 限 同样 成 并 . 
在 结束 本 市 之 前 , 我 们 可 以 把 定理 4.2, 即 初等 更 新 定理 : 


.1 ] 
Jim 7M(D 一 pe (5.5) 


作为 定理 5.2 的 推论 重新 推导 证 得 . 为 此 , 置 6 = M(n 十 1) 一 MI(n). 着 设 下 不 是 算 
术 的 , 定理 5.2 指出 当 nn 一 oo 时 b 一 1 六 斯 以 各 的 平均 值 也 收敛 于 相同 的 极限 . 
这 样 ， 
1 二 、 1 、 1 1 
lim ~ Y b= lm 二 》M+D-M( = lim 二 Mn)= 一 . 
和 一 Oo 天 1 二 0 N00 人 x0 no0 只 HM 


现在 , 对 任意 t > 0, 令 由 表示 不 超过 的 最 大 整数 . 由 M(t) 的 单调 性 知 


MD) MO 轩 +1M(I+D) 


t 

tt tt +l 

由 于 二 "M(t) 被 收敛 于 -的 函数 列 所 夹 住 , 从 而 推 得 式 (5.5). 如 果 FF 是 算术 的 ， 
其 跨 距 为 和 我 们 置 如 = MI[(n 十 1)A] 一 MM(nA), 然后 利用 与 上 述 完 全 平行 的 推理 ， 
即 可 证 得 (六). 


5.6 ”更 新 定理 的 应 用 


(a) 剩余 寿命 的 极限 分 布 
设 = SN(t)+1 一 t 是 在 时 刻 t 的 剩余 寿命 , 固定 z > 0, 置 


A,{t) = Pr{Yy: > 2}. 


我 们 应 用 更 新 论证 法 构造 关于 4, 的 更 新 方程 . 依 通 常 途径 假定 第 一 次 更 新 时 间 为 
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Xi = 2, 得 到 (建议 读者 画图 分 析 ) 


1, 大 7>t 二 %， 
Pr{y > z|X1 =7z}=¢ 0. 和 tt 十 Zz 之 xX>t 


再 根据 全 概率 公式 
As(t) = | Prfoye > 2|X1 = z}dF(g) 
==1 一 F(t 十 z)+ [ A,(t — rz}dF'(x). (6.1) 
由 定理 4.1 推 得 
Aslt) =1— F(t+z)+ fa F(t+z—z)}dM(z). 
为 了 得 到 极限 分 布 , 我 们 假设 
= so- 人 {1 ~ F(z)}dz < o0. 


则 
/ {1—F e+ajdt= 人 {1 — F(y)}dy < oo， 


并 且 由 于 {1 一 了 (t+z)} 是 单调 的 , 从 而 当 z 固定 时 , 它 作 为 的 函数 是 直接 歼 晕 可 
积 的 . 应 用 更 新 定理 得 到 


im Pr > 本 = im, A =p (Fl)Ydy, z+>0 (62) 
这 即 是 剩余 寿命 的 斯 近 分 布 


现 龄 4 和 全 寿命 Bi 的 极限 分 布 可 由 (6.2) 推出 . 借助 图 5-6 我 们 可 直接 证 明 
下 面 事件 的 等 价 性 


{x% 宇 ZT 和 5 之 y} 当 且 仅 当 {4%-_y 宕 7X 十 中. (6.3) 


由 此 推 得 
lim Pr{ 4: 之 Y, jt 之 7} 一 Lim Pr{7t-y 之 了 十 y} 


= / {1 ~ Flo}dz, (6.4) 
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以 


于 


图 5-6 说 明 {61 > 和 >Zz 当 且 仅 当 {yi-y XI 十 贡 
式 (6.4) 即 为 {64, yx} 的 极限 联合 分 布 . 特别 地 ， 


dim Pride > y}= lim Prid > Y, Yt > 0} 


一 1 一 1 / 6 — F(z)}dz. (6.5) 


Be = 6t 十 % 的 极限 分 布 能 够 从 极限 公式 (6.4) 算出 . 而 且 它 可 借助 于 更 新 论证 
法 很 快 证 明 得 到 . 我 们 下 面 只 作 简 单 介绍 . 定义 


K,(t) 一 Pr{ > 7}. 
设 定 第 一 次 更 新 事件 的 时 间 , 我 们 有 


1 ， 若 Y > max(x,t), 
Pr{B: > zIX1 =y}=4 4 Ks(t—y), 大 Yy <t, 
0, 其 他 . 


由 全 概率 公式 推 得 更 新 方程 
Ke 人 =1- Flmax(nt) + { Kalt ~ WAPly) 
应 用 更 新 定理 得 到 如 下 极限 分 布 
lim Pr{B > 2} = lim Ks(t) = | [EL Flmax(z, 7))ldr 
= £dF(é) (6.6) 


其 中 最 后 一 个 等 式 是 对 第 一 个 积分 使 用 分 部 求 积 分 法 得 到 的 . 相应 地 ， 我 们 构造 全 
寿命 的 极限 分 布 是 


km, Pr{B: < 可 = 人 tar(e) = Gl) 
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当下 的 密度 为 f 时 , 则 G 的 密度 显然 是 zj/(z)/1 
G(z) 的 均值 与 F(x) 的 均值 之 间 的 关系 是 有 趣 的 . 考虑 


f TdG(7T) = 本 站 zdF(z), (6.7) 


把 这 个 量 与 作 比 较 , A 是 任意 更 新 区 间 的 平均 长 度 . 注意 , 施 瓦 效 不 等 式 ( 见 第 1 
章 ) 胆 普 着 


/ | z2dF(z) > 12 = ( / zdF(z)) ， (6.8) 


除非 下 是 退化 分 布 , 否则 严格 不 等 号 成 立 . 关系 式 (6.8) 告诉 我 们 , 目前 而 言 平均 全 
寿命 一 般 严 格 超过 普通 平均 寿命 . 当然 , 这 个 事实 和 泊 松 过 程 情况 (5.3 节 ) 计算 结 
果 是 一 致 的 , 后 者 指出 了 平均 全 寿命 是 平均 寿命 的 两 倍 . 不 等 式 (6.8) 证 实 了 对 于 
包含 指定 点 的 寿命 区 闻 进 行 抽 样 具有 “长度 偏 倚 ”性 质 . 


(b) 更 新 函数 的 渐 近 撒 开 式 


假设 是 非 算术 分 布 , 其 方差 o? 有 限 . 现 确定 M(t) 渐 近 展开 式 中 第 二 项 , 需 
要 证 明 
02 _ 1 
212 
当 t 很 大 时 , M(t) 的 高 阶 渐 近 性 质 也 可 应 用 类 似 方法 求 得 , 假设 到 的 高 阶 征 存在 . 
定义 


lim MO 的 一 上 英 = 


H(t)= M(t +1— pt 
= EIN(t) +1)— 4 it 
=p-1{ElSw+1]—t} ( (4.12)) 
一 HA 五 (由 (4.13)) 195 
再 一 次 求助 于 更 新 论证 法 , 设 定 第 一 次 更 新 时 间 Xi = 2, 得 到 一 个 关于 昌 (t) 的 更 
新 方程 . 直接 列举 各 种 情况 算出 


jz-t, 阁 z24 
BlX1 = = | uH(t -7z),， 大 zx<t. 
应 用 全 概率 公式 得 到 
LH(t) =-/ ElylXi = zldF'{(z) 


fe — tdF(z)+ 阿 | H(t — 7z)dF (x). 
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由 于 
/ c-bara= 上/ vaFt+y) = 上 {1 — F(t+y)}dy 


是 + 的 单调 函数 , 利用 表达 式 1_ F(t 十 从 = 人 dF(z), 并 调换 积分 顺序 , 得 
tty 


f {/ -Peronlayja 
-人 人 人 dF'(z}dvydt 
- 广 广 { 广 dy }dF(z)dt 


OO fo 


(z—tdF(z)adt 
(z~—t)dtdF'{z) 


/ zdF(z) = 5(0 + 4) < 
0 


所 以 更 新 定理 理 涵 着 
lim pH(E) = p102 二 12)， 
t+ 一 Oo 2 
或 og 十 1 og< 1 
lim {M() ~ pt} = lim {H(t) — 1} = 2 1 
即 为 所 证 . 
5.7 ”更 新 过 程 的 推广 
A, 延迟 更 新 过 程 


我 们 继续 假设 {Xx*} 是 独立 正 随 机 变量 序列 , 但 仅 从 第 二 项 开始 , 即 X2, Xa,… 
是 同 分 布 的 , 其 分 布 函数 为 F, 而 Xi 可 能 有 不 同 的 分 布 函数 G. 这 样 的 过 程 称 为 延 
迟 更 新 过 程 . 它 除 了 从 初始 时 刻 到 第 一 次 更 新 具有 特别 分 布 之 外 , 其 他 过 程 与 普通 
更 新 过 程 完全 相同 . 

产生 延迟 更 新 过 程 的 一 种 途径 是 当 t = 0 时 运行 的 成 分 , 不 是 从 新 的 状态 开始 
的 . 例如 , 假设 原点 取 在 一 个 普通 更 新 过 程 开始 以 后 的 第 y 个 单位 时 间 处 , 则 该 延迟 
过 程 在 原点 之 后 到 第 一 次 更 新 时 间 的 分 布 是 一 个 普通 更 新 过 程 在 时 刻 y 处 的 剩余 
寿命 的 分 布 . 


上 
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如 前 , 设 S5o=0 和 9n= Xi 十 … 十 Xn, 令 NN(t) 是 至 时 刻 t 为 止 的 更 新 数目 ， 
我 们 必须 区 分 延迟 更 新 过 程 中 更 新 数目 的 均值 


MDp(t) = EIN(t)] 


和 关于 分 布 函数 三 的 更 新 函数 
MI(t) = 》 F(t). 
太一 1 
设 定 第 一 次 更 新 时 间 , 记 
0 条 xX>4 
PIN WI = -| 1+M(t-zx)， 若 z<t. 197 


利用 全 概率 公式 , 得 到 
MDl(t)= 人 E[IN(t)|X1 = zldG(z) 
0 
- | {1+ M(t — z)}dG(z) 
0 
= G(t)+ | M(t — x)dG(z) 
(7.1) 
= G() + | Gt zdM(z). 
0 
显然 , 等 式 (7.1) 显示 Mp(t) 可 作为 下 面 更 新 方程 (与 (4.9) 和 (4.10) 相 比 较 ) 的 解 : 
MDp(t) = G(t) + Mplt— xz)dr(r). (7.2) 


我 们 以 下 证 明 , 大 FF 不 是 算术 分 布 , Mp(t) 服从 更 新 定理 . (对 于 FF 是 算术 分 
布 情况 , 可 类 似 处 理 ). 由 (7.1) 我 们 可 知 , 对 任意 t+>0 有 


Mp(t) = G(t) + / M(t — x)dG(zx), 
特别 , 当 t > 时 ， 
Mp(t—h)= G(t—h)+ / M(t—h— zr)dG(z). 
约定 当 z <0 时 M(z) = 0, 上 面 两 个 等 式 之 差 为 


Mp(lt)})— Mp(t—h)=G(t)— G(t—h) + | {M(t—7z)— M(t—h—7r)}dG(zr). 
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为 方便 起 见 把 上 式 积分 分 为 两 个 : 
t/ t 
/ Mt —7X)— M(t—h—7r)}dG(r) 十 / {M(t—-7z)—- M(t—h—7r)}dG(r). 
0 £/2 


由 于 lim {M(t 一 2) 一 M(t 一 一 2)} = h/p, 第 一 个 积分 收敛 于 h/p, 而 第 二 个 收 傲 
于 0, 因为 {M(t 一 7z) 一 M(t 一 h 一 7z)} 是 收敛 的 , 因此 是 > 的 有 界 函 数 .， 显然 , 当 
t 一 oo 时 , 有 G(t) 一 G(t/2) 一 0, 于 是 求 和 得 
lim [Mp(t) ~ Mp(t ~— hh) = h/p. 
B. 平稳 更 新 过 程 
一 个 延迟 更 新 过 程 , 当 其 第 一 个 寿命 分 布 函数 为 


G(s) = 三: / {1 F(y)}dy 


则 称 它 为 平稳 更 新 过 程 . 我 们 想象 一 个 更 新 过 程 开 始 于 无 穷 远 的 过 去 , 使 得 正在 原 
点 运行 的 个 体 的 剩余 寿命 具有 普通 更 新 过 程 剩 余 寿 命 的 极限 分 布 . 我 们 用 G 表示 
这 个 极限 分 布 . 

可 以 预期 这 样 一 个 过 程 将 至 现 出 寿 二 平稳 性 或 时 间 不 变性 对 于 平稳 更 新 过 程 ， 
我 们 将 对 此 作 充 分 倍 明 , 对 所 有 上 


MDp(t) = EIN(t)]) = t/p (7.3) 


Pr{y < x} = G(z) 
均 成 立 . 因此 一 般 来 说 仅 是 渐 近 的 更 新 关系 式 , 在 平稳 更 新 过 程 中 , 却 变 成 对 于 所 
有 + 上 成立 的 恒等式 . 

由 等 式 (7.2) 知 Mp(t) 满足 更 新 方程 


MDpD(t) = G(t) + / Mplt — z)dF(z), (7.4) 


由 于 这 样 一 个 方程 的 解 是 唯一 的 (在 适当 的 有 界 性 限制 之 下 , 见 定理 4.1), 我 们 仅 需 
要 检验 Mp(t) = t/p 是 否 满足 (7.4). 我 们 有 


a+/ Mp(t — x)dF(z = -Prot 人 (t — z)dF(z) 


a foam )dF @)-/ F(y)dy! 


= jt, 
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通过 分 部 积分 可 验证 大 括号 里 的 式 子 为 0, 由 此 推 得 Mp(t) = t/p 成 立 . 
按 同样 方法 可 证 , 对 任意 z, Pr{yP < z} = G(z) 成 立 , 这 里 7P 是 延迟 (平稳 ) 
更 新 过 程 中 的 剩余 寿命 . 令 


AP(t)=Pr{y? > zx} 和 Azs(t) = Pr{Yy > 1}, 
其 中 4 是 普通 更 新 过 程 的 剩余 寿命 . 由 标准 更 新 论证 方法 得 到 
49() =1- GE+0)+ {Ast -Waoty) 
0 
或 
AT(t)=1—-G(t+7r)+G*Ar(t). (7.5) 


其 中 更 新 方程 
Aslt) =1— F(t+7z)+F*A,(t) 


早已 在 5.6 节 中 作 了 详细 介绍 , 借助 于 定理 4.1, 其 解 可 表示 为 形式 
Az(t) = az(t) + M * az(t), (7.6) 


其 中 
Qaz(t}=1— F(t+ 2). 


把 (7.6) 代入 (7.5), 并 利用 公式 Mp(t) = G(t) 十 G* M(t)( 此 式 可 直接 由 定义 得 
到 ), 我 们 得 到 


AP(t)=1~-G(t+r)+G*a(t}+G+* Mi*as(t) 
=1—G(t+2z)+ MD*ar(t) 


一 1 一 CU 十 I) +/ az(t ~ ydMp(y). 
0 
由 于 az(t 一 四 = 1-F(t+z-y) 和 Mp(y)=y/n, 所 以 dMp(y) = pp dy. 则 
47 (有 二 1 一 GE+Z) 十 1 [0 — F(t+7z—y)}dy 
tts 
一 1 一 G(t 二 2Z) 十 1 / {1 — F(u)tdu 


=1~G(t+7r)+Gt+i+7r)— GI(7) 
= 1 人 G(r), 


即 为 所 证 . 
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C. 累积 的 和 相关 的 过 程 


假设 与 第 i 个 元 件 或 寿命 区 间 相 联系 的 , 除了 寿命 区 间 X; 之 外 还 有 第 二 个 随 
机 变量 关 ({ 了 i} 同 分 布 ). 我 们 允许 X; 和 8 是 相关 的 , 但 假设 (Xi 1), (X2,Y2),… 
是 独立 的 . 我 们 将 使 用 记号 F(x) = Pr{Xi; < 7z},G(y) = Pr{Y < y},4 = EB[Xi] 和 
y = ElYi|. 


实际 上 和 理论 上 的 者 干 问 题 可 用 如 下 术语 加 以 描述 . 
I 在 每 个 更 新 区 间 含 有 两 个 分 量 的 更 新 过 程 


假设 到 表示 Xi 的 一 部 分 . 图 5-7 解释 了 这 个 模型 . 图 中 Y 部 分 出 现在 区 间 的 
开端 , 但 这 并 非 下 面 结果 的 本 质 所 在 . 


/| 六 和 | 


一 一 | 一 一 一- 
5-7 每 个 更 新 区 间 会 有 相应 随机 变量 Y; 的 更 新 过 程 


设 pz( 是 t 所 在 某 个 更 新 区 间 Y 部 分 的 概率 . 设 定 第 一 次 更 新 区 间 的 长 度 
Xi = 7, 并 将 其 区 别 > < 上 和 zx > 上 上 两 种 可 能 , 我 们 得 到 (利用 通常 方法 ) 更 新 方程 


p(t) = Pr{t 被 六 所 覆盖 } 二 | p(t — £)dF(é). 


心 


T (t) = l, 各 六 履 冲 二 
0， 若 六 不 覆盖 


则 
Pr{t 被 六 所 覆盖 } = Elly, 人] 


/ “Prt 被 坟 所 覆盖 }dt= / Elly, (tldt 
0 0 


= | / Ey (Wat| 


一 ElYi| 一 Vb, 


由 于 被 3 所 覆盖 的 点 的 全 体 仍 为 六 , 故 应 用 更 新 定理 , 我 们 可 断言, 如 果 F 是 非 
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算术 的 , 并 且 Pr{t 被 所 履 盖 } 是 直接 黎 曼 可 积 的 , 则 


im p(t)= 47 / Pr{t 被 到 所 履 盖 }dt 


= Vv/H. (7.7) 


下 面 是 一 些 具 体例 子 . 
(a) 替换 模型 


考虑 蔡 换 不 是 瞬间 进行 的 替换 模型 的 情况 . 设 到 是 第 i 个 元 件 运 行 的 时 间 , 2 
是 第 i+1 个 元 件 运行 前 的 滞后 区 间 . (在 替换 中 的 清 后 可 以 解释 为 服务 元 件 修 理 的 
时 间 ). 我 们 假设 相继 替换 之 间 的 时 间 序 列 为 Xk = Yi 十 Zk,k = 1,2,…, 由 此 构成 
一 个 更 新 过 程 . 在 总 的 分 布 是 非 算 术 的 , 则 在 时 刻 上 系统 处 于 运行 状态 的 概率 p( 
收敛 于 E[Y1]/E[X1]. 


(b) 排队 模型 


大 顾客 的 到 达 遵 循 泊 松 过 程 , 那么 从 第 上 个 忙碌 周期 至 下 一 个 忙碌 周期 的 间 
隔 时 间 构 成 一 个 更 新 过 程 . (一 个 忙碌 周期 是 排队 队伍 不 为 空 的 持续 时 间 ). 每 个 Xk 
是 由 忙碌 部 分 Zk 和 空闲 部 分 欢 组 成 . 那么 , 队伍 在 时 刻 t 是 空 的 概率 p(t) 收 伍 于 
E[Y /EIX]. 


(c) 计数 问题 


设 Xk,k = 1,2,.…, 表示 计数 器 相继 记录 两 个 粒子 的 间隔 时 间 序 列 , Yi. 表示 在 
义 : 更 新 区 国 里 的 团 锁 时 间 , 则 计数 郝 在 时 刻 上 团 锁 的 概率 Pb 收敛 于 五 ()/ (Xi)， 


II. 系 积 过 程 


把 到 解释 为 与 第 i 个 更 新 周期 相 联系 的 成 本 或 价值 等 . 现在 我 们 来 考虑 一 般 
的 关于 一 对 随机 变量 (Xi 于) 问题 , 其 中 X; 产生 一 个 更 新 过 程 . 这 里 感 兴趣 的 主要 
在 于 所 谓 的 累积 过 程 : 


N(t)+1 
W(t)= >》 次， 
k=] 
它 表示 到 时 刻 t 为 止 累积 的 价值 等 (假定 交易 在 每 个 更 新 周期 开始 进行 的 ). 设 定 第 
一 次 更 新 时 间 Xi = zx, 并 依 > > 上 和 x < t 两 种 可 能 情况 , 我 们 获得 对 于 A(t) = 
EIW(t)] 的 更 新 方程 


A(t) = E[Yi] + / A(t — z)dF(z). 
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根据 定理 4.1 得 
A(t) = EY + / ElYi]dM(s) = EVN + MO. 


由 此 , 当 玉 是非 算术 的 且 h>0 时 ,有 
Jim (AG) — Alt — A)] = PDMn 
并 在 任何 情况 下 都 成 立 下 式 
lim, 7 A(t) = ED 


这 就 验证 了 [Yi]/k 可 作为 每 单位 时 间 长 久 平均 成 本 、 价 值 等 的 解释 , 这 在 5.3 节 
例子 中 曾 多 次 被 使 用 . 

下 面 是 累积 过 程 的 一 些 例子 . 

(a) 将 换 模型 

在 依 龄 震 换 策略 之 下 ( 见 5.3 节 例 B), 我 们 假设 在 时 刻 T 替换 的 成 本 是 ci 元 ， 
而 在 时 刻 z < 了 损坏 替换 的 成 本 是 cs 元 . 若 Y 是 第 上 次 替换 周期 所 花费 的 成 本 ， 
则 

y, = | c1， 以 概率 1 一 F(T)， 
c2， 以 概率 下 (了 )， 


因此 E[Y] = cid 一 FTD +cFT). 由 于 一 个 替换 周期 的 平均 长 度 是 
T 
Elmin{ Xx, TY} = / [1 — F(z)ldz, 


故 每 单位 时 间 长 久 成 本 是 
cll ~ F(T)] + coF(T) 
T ’ 


/ [1— F(z)ldz 


在 一 些 特殊 情况 下 , 可 借助 微 积 分 方法 或 数值 计算 方法 求 出 使 上 式 为 最 小 的 了 值 . 

在 整体 蔡 换 策略 中 , 每 了 个 单位 时 间 有 一 次 计划 替换 和 平均 M(T) 次 损坏 替 
换 . 这 样 成 本 均值 为 B[Y] = cl + czM(T), 因而 每 单位 时 间 长 久 平均 成 本 是 {cl 十 
cM (TIHT. 

(b) 计数 模型 

在 计数 器 模型 中 ( 见 5.3 节 例 C0), 设 Yi 是 第 上 一 1 次 记录 信号 和 第 次 记录 
信和 号 之 间 出 现 的 但 未 被 记录 的 信号 的 数目 ， 则 每 单位 时 间 未 被 记录 的 粒子 的 长 久 
平均 数 是 E[Yi]/E[X1l. 


sar i 


I + TE 
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(c) 保险 理论 
屋 疫 一 个 保险 公司 收 到 案 取 周 俊和 要求 的 间隔 时 间 序 列 {Xi} 为 一 更 新 过 程 . 
+1 
Yi 是 第 大 次 索取 的 数量 , 则 W(t) = > Yk 表示 至 时 刻 十 为 止 票 积 索取 量 , 长 久 
k=0 
平均 索取 率 为 | 
Lm 7 PIW(t) = E[Yi]/E[X!]. 
D. 有 终止 的 更 新 过 程 


设 一 个 更 新 过 程 可 能 有 无 限 长 的 间隔 时 间 , 这 样 的 过 程 称 为 有 终止 的 更 新 过 程 ， 
因为 此 过 程 在 第 一 个 无 限 长 的 间隔 时 间 里 停止 更 新 . 这 种 情形 如 图 5-8 所 示 . 


NO 


图 5-8 
令 工 二 了 (oo) = 二 Pr{Xk<o0}<1l1 和 1 一 上 = Pr{Xh = ool > 0. 在 全 部 时 间 里 
更 新 的 总 数 用 N(oo) 表示 , 则 它 是 有 限 值 随机 变量 并 服从 几何 概率 分 布 
Pr{N(co) > k} = LIL*, k=0,1,2,..., 
因此 、 
EIN(o0)]= 》 Pr(N(co) > A) 


天 一 
= ZL/ -站 


有 终止 更 新 过 程 的 实现 仍 具有 性 质 : Nb >k 当 且 仅 当 Sk < t, 所 以 
Pr{N(t) > k} = Pr{Sx & t} = F(t), 
并 且 
M(t) = EIN(D)] = >_ 及 上 <》 LL:=L/(1-L). 


k=] 上 一 1 


再 者 , 利用 更 新 论证 法 , 得 到 方程 


M(t) = F(t) + | M(t—z)dF(z). 
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然而 , 由 于 了 不 是 正常 的 概率 分 布 函数 , 更 新 定理 并 不 能 直接 使 用 . 幸运 的 是 , 有 一 
常见 方法 可 解决 这 个 问题 . 假设 
90(5) = 人 edF(z) 


当 s 之 0 时 是 s 的 有 限 泪 数 . 则 9 将 是 连续 的 并 且 g(0) = 工 < 1, lim g(s) = co, 从 
而 推 知 存在 一 个 唯一 的 正 值 Se = 和 > 0, 使 得 


g(A) = / rdF(z) =1 
定义 | 
F(t) = / edF(z), 


则 F(t) 是 不 减 的 并 且 lim F(t) = 1, 因此 天 是 正常 的 分 布 函数 ， 现 在 我 们 考虑 更 
新 方程 


A(t) = a(t) + / A(t ~ z)dF(z). 
置 A(t) = exA(t),a(t) = exXalt), 则 有 
A(t) = e*t A(t) 


= e*ta(t) + [ ei) A(t — z)e*rdF(z) 
0 
= &(t) 十 / A(t ~ xz)}dF(z), 


上 式 指 出 4 满足 包含 正常 分 布 函数 的 更 新 方程 , 可 对 上 述 更 新 方程 应 用 更 新 定理 . 
作为 特例 , 考虑 A(t) = M(o0) 一 M(t) = 工 /(1- 荆 一 ME). 等 价 地 , 4(t) = EIN(00) 一 
N(t)] 是 满足 关系 式 t < 5 < oo 的 指标 n 的 平均 数目 . 我 们 现在 来 推导 4A(t) 所 满 
足 的 更 新 方程 . 事实 上 , 我 们 有 


1+L/(1 一 LL)， 若 zx>4 


lveo -NO = ={ 车 0<z 忒 二 


利用 全 概率 公式 推 得 
A(t)= 人 E[IN(00) — N(t)|X1 = zjdF(z) 


{LF L)+ | A — z)dF(z). 
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其 次 验证 
6 人 (三 6{ 人 一 下 ( 扩 /一 万 ) 
古 直 接 黎 受 可 积 . 因为 


OO . ] CO | 
/ a(t)dt= 一 e*t{L— F(t)}dt 


0 
1! / | et / | dF(z)dt 206 
1 一 元 J0 1 


1 OO 网 
一 T 二 了 / / e*tdtdF (7x) 
0 0 


1 /®(e**—1) 
= Tz/ i dF'(z) 


1 (1-L)_1 


I-L A 


lim, A() = irm, eIM(00) -MO 


oo -1 
= 人 / redF(z)) . 
我 们 得 出 , M(t) 以 入 为 比率 的 指数 速度 通 近 M(oo) = LL/(1 一 工 ). 
E. 交替 和 马尔 可 夫 更 新 过 程 
一 个 交替 更 新 过 程 是 一 个 独立 随机 变量 序列 关 ,Y2,…, 其 中 


Yi, YYr 二 1 Yo2r 十 1 有 分 布 函数 ar 
Y2, Yr+2) Yor+2) “*? 有 分 布 函数 F», 


Yr., Yor, Yar, 0 有 分 布 函数 F.. 


我 们 考虑 一 个 相继 通过 状态 1,2,…,7,1,2,…,7,1,2,… 的 系统 ， 当 经 过 每 一 个 状 
态 时 都 喜 留 一 个 随机 时 间 段 . 

设 P(t) 是 系统 在 时 刻 t 处 于 状态 i 的 概率 . 由 C 部 分 中 的 关系 式 (7.7), 倘 大 
分 布 玉 = 互 * 羽 *.…*. 是 非 算术 的 , 我 们 推 得 


ia, pi(0) = pa/(ps + + pr) 


其 中 . 
ti = E[Yi] < 00, i= Yr 
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根据 具有 转移 概率 矩阵 已 = ||P5 必 5=1 的 马尔 可 夫 链 知识 , 马尔 可 夫 更 新 或 半 
马尔 可 夫 过 程 经 过 状态 1,…,7 并 且 已 知 下 一 状态 是 j, 则 逗留 在 ;的 时 间 具 有 分 
布 函 雪 Fj, 且 限 于 这 一 串 状 态 , 所 有 去 留 时 间 都 可 假定 是 独立 的 . 在 状态 i 逗留 时 
间 的 无 条 件 分 布 函 数 是 F(t) = 》 Pi; Fi;(t), 其 中 假设 它 具有 有 限 均 值 ji. 此外, 还 
假设 上 面 马尔 可 夫 链 是 不 可 约 的 和 常 返 的 , 并 具有 已 知 的 平稳 分 布 mm = 》, iP 

现 设 过 程 从 固定 状态 i 开始 , 并 令 上 是 事先 指定 的 状态 .从 某 一 次 到 达 状 态 i 
到 下 一 次 到 达 状 态 i 之 间 的 时 间 区 间 称 为 一 个 i 循环 . 这 些 相 继 到 达 i 的 间隔 时 间 
序列 构成 一 个 更 新 过 程 . 假设 至 少 一 个 不 是 算术 的 , 由 关系 式 (7.7) 可 知 , 在 时 
刻 处 于 状态 的 概率 P(t) 收敛 于 在 状态 的 平均 逗留 时 间 除 以 i 循环 的 平均 时 
间 长 度 所 得 的 数值 . 再 由 全 概率 公式 , 一 个 i 循环 中 处 于 状态 的 平均 时 间 等 于 jx 
乘 以 在 相继 两 次 到 达 状 态 i 的 间隔 时 间 中 到 达 k 的 平均 次 数 . 第 二 个 因子 仅 依赖 于 
逗留 状态 的 离散 时 间 马 尔 可 夫 链 , 因此 必须 与 xk 成 比例 关系 . 由 此 推 得 


Jim pr(t) = CTKEAK， 
一 总 全 


其 中 c 是 比例 常数 . 由 于 这 些 概率 和 必 为 1, 因此 ce=1/(ra 十 :十 7 
F. 更 新 过 程 的 中 心 极限 定理 
定理 7.1 设 {Xn} 是 一 更 新 过 程 , 4 = 瑟 [Xi < oo, 并 且 co2 = 殖 [( XI 一 由 3< oo， 


则 

Jim pr{ < z| = (7r), 
其 中 ca 

下 (2Z) = - 遍 [- exp ( 一 2 ) dv 
是 正念 积分 . 


证 明 ”证 明 是 基于 对 5% = Xi 十 Xz 十 … 十 X。 使 用 中 心 极限 定理 及 基本 等 价 
关系 : {NN(t) <n} 当 且 仅 当 {5% > 让. 
设 z 是 固定 的 , 并 令 n,t 以 使 下 面 关 系 式 成 立 的 方式 趋 于 oc: 


一 了 及 
lim 2. 
‘= goVn 


则 由 通常 的 中 心 极 限定 理 有 


lim Pr{Sn>= lim pr{ 二 二 > -z| 一 上 一审 (一 Z) = (7). 
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然而 , 另 一 方面 , 因为 当 t 一 00,n 一 oo 并 使 得 (i 一 np)/vno? 一 一 z 成 并 时 , 有 
(mn -t/a)/Vto?/p 一 世故 


P(r)= lm Prton > 


T+ oO 


= im Pr{N(t) < n} 


Le 


a Pr{ ~ < 用 一 ce 
Via/ Vto?/p3 
N(D) —t/h 
npr VI <z 
上 面 的 分 析 只 是 形式 的 推导 , 读者 可 以 将 其 严格 化 . 
G. 保险 理论 中 的 破产 


令 N(t) 表示 在 时 间 区 间 (0, 引 内 向 一 个 保险 公司 索取 赔偿 费 的 次 数 . 设 N(t) 
是 参数 为 和 的 油 松 过 程 . 此 外 , 假设 相继 索取 的 金额 i,Y2.… 是 具有 分 布 函数 G(z) 
的 独立 同 分 布 随 机 变量 . 令 每 单位 时 间 的 资金 流入 (保险 费 , 投资 等 ) 为 c 元 , 并 假 
设 会 司 初 始 的 财富 为 z. 那么 , 在 时 刻 t 现金 余额 应 为 


N(t) 


T(t)=z+ct— 》 了 


?一 | 


其 中 于 是 第 i 次 案 取 的 金额 .下面 一 个 有 趣 的 问题 是 弄 清楚 具有 连续 偿付 能 力 的 
概率 , 它 是 z 的 函数 . 即 我 们 希望 确定 
N(t) 


R(z)= Pr{2 十 ct 一 > Y > 0, 对 所 有 t} (7.8) 
i=1 
= 在 初始 财富 为 z 下 不 破产 的 概率 . 
我 们 应 用 更 新 论证 法 , 设 定 第 一 次 泊 松 事件 的 时 间 为 元 , 利用 全 概率 公式 得 到 


N(t) 


R(z) = 各 Pr{: 十 弛 一 2 Yi > 0 对 所 有 tI = re "adr, (7.9) 
而 者 设 定妆 的 值 又 可 得 到 


Nb 
Pr{z+ct— 2 > 0 对 所 有 ti -7 


N(t) 


=-/ Pr{? +ct— > 中 >0 对 所 有 th =y, 了 = rjacy) (7.10) 
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给 定 于 = 7, = yy, 过程 T(t) 在 时 刻 7 之 后 立刻 更 新 , 拥有 新 的 财富 


2 十 cr 一 1. 所 以 
N(t) 
Pr{z+ct 一 了 ,Y>0 对 所 有 iY =y,T =7] = R(z + cr 1). 


二] 


显然 , 当 4 < 0 时 ,有 R(w) = 0 成 立 . 
把 (7.10) 和 (7.11) 代入 (7.9) 可 得 积分 方程 


R(z) = [ (f R(z++cer— y)dG(y) ) Xe dr 
对 外 面 的 积分 进行 变量 替换 : t = z + cr, 并 移 项 得 
R(zje-xz/e = ”> / ( / RE- WdG(y) eseat 


由 此 可 知 , R(z) 是 可 微 的 , 微分 后 得 到 


ee[RO)- 28 = -Se | Re-9aGOyh， 
或 等 价 地 、 
Ro) = 2R(z) -| Re -wacty) 
对 上 式 两 端 关 于 z 积分 得 


R(w) ~ R(0) = - / ~ R(z)dz - ~ / | /| R(z - ydG(y) )dz, 
改变 积分 顺序 , 并 进行 变量 替换 上 = z 一 y, 导出 


Rw =RO+S | Bea- sf (ff Med)acg) 


定义 Sz) = / ”R(E)qé, 并 利用 分 部 求 积分 法 得 到 


R(w) — R(O) = 3S(w) -2{8(w) — | Rew -Wh Glay} 


Ww 
0 


Rw) = RO)+¢ 1/ Rw — Wi- Gay 


(7.11) 
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从 而 , 我 们 得 到 了 一 个 带 有 非 正常 密度 函数 (和 Ac)[1 一 G(y) 的 更 新 方程 , 因为 
人 0 一 Cjjdy = > BID = ~p 
如 果 A 和 py/c > 1 可 以 肯定 R(z) = 0( 为 什么 ?). (注意 入 是 每 单位 时 间 因 索取 赔偿 而 
付出 资金 的 期 望 值 , 而 c 是 流入 率 ). 下 面 我 们 假定 和 jp/c < 由 于 a(w) = R(0), 在 
这 个 退化 情形 下 仍 应 用 定理 4.1, 可 得 


R(w) = a(w) + / alw — WAM(y) = RO + M(w)), 


由 于 MM(w) 对 应 于 有 终止 的 更 新 过 程 


lim M(w) = 1/(1—D) = 


~ 1- Me 
因此 有 
lim, Rw) = T0070: 
但 R(o0) = 1( 为 什么 ?), 从 而 得 到 
ROO)=1- 2 


细致 的 分 析 将 能 得 到 更 精确 的 渐 近 关系 式 . 
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A. 有 变异 的 遗传 模型 


考虑 一 个 总 数 为 N 的 有 限 群体 , 并 用 1,2,…, NN 编号 . 设 它们 是 进化 过 程 中 第 
一 代 , 此 过 程 受 一 定 的 自然 选择 作用 和 变异 作用 的 影响 . 

群体 的 每 一 个 体 都 具有 称 之 为 “适合 度 ” 的 特征 . 粗略 地 说 ,“ 适 合 度 ”是 个 体 
在 繁殖 后 代 方面 相对 优势 的 一 种 衡量 . 用 ww 表示 第 一 代 的 第 个 个 体 的 适合 度 . 
取 


1 
Ww 
N 
1 
>》 wj 
j=1 


它 表 示 惠 大 个 个 体 的 相对 适合 度 的 什 , 下 一 代 由 NN 次 独立 抽样 来 形成 , 每 次 抽样 均 
服从 概率 天 量 (8.1) 的 多 项 式 分 布 . 于 是 , 每 个 后 代 都 带 有 其 亲本 型 的 适合 度 值 wk， 


Uk 一 ,=1,2,...,N, (8.1) 
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并 且 被 挑选 出 来 的 概率 是 wx. 显然 , 适合 度 比 其 他 高 的 个 体 相应 地 具有 较 大 的 相对 
适合 度 值 , 因此 显然 有 比较 大 的 机 会 繁殖 其 婧 亲 的 类 型 . 这 个 多 项 式 繁殖 过 程 产 生 
的 后 代 群 体 具 有 适合 度 值 


~ ~ ~ ~ 


(自然 , 每 个 说 都 是 {w} 中 的 一 个 值 . 个 体 的 类 型 和 它 的 适合 度 相 一 致 .) 

向 量 w” 还 没有 形成 成 熟 的 第 二 代 群 体 ， 我 们 将 引入 变异 的 可 能 性 , 后 代 可 
能 要 经 历 适 合 度 值 的 自发 性 的 改变 ， 关 于 变异 作用 的 精确 叙述 如 下 : 设 {Vi;i = 
1,2,…, NN,j = 2,…} 是 独立 同 分 布 正 随机 变量 矩阵 列 , 令 


向 量 (wi,w2，……,X) 表示 第 二 代 成 熟 个 体 的 适合 度 . 重复 上 述 过 程 , 相继 产生 一 
系列 维 向 量 , 它们 通过 适合 度 向 量 w* = (wt，,… ,wh) 及 相对 适合 度 向 量 wk = 
(uf,…, uN)[ 上 标 表 示 世 代 序 数 , 它 从 (8.1) 所 指定 的 初始 群体 开始 计数 ] 的 改变 来 
描述 群体 的 进化 . 从 w* 和 wu* 确定 w*+! 丰 民 人 的 入 诗 规则 w! 形成 w? 的 
规律 一 致 , 我 们 投 述 如 下 挑选 wt(i = 1,2,…NN) 的 概率 为 w* 以 相同 的 概率 从 
ta 中 抽取 NN 个 独立 的 值 . 灾后 _ … 证 夺 ) 表示 所 得 的 向 最 . 
变异 变化 则 通过 乘 以 正 随机 变量 V*t+! 将 名"+ 变换 成 tk+l, 即 


ti = Wet V+, i = 1,2,...,N. 
最 后 , 按 如 下 规则 确定 相对 适合 度 向 量 w+ 


k+1L _ Ww; ， 
Us 二 1=1,2,.…,N. 


这 个 进化 过 程 可 以 用 点 w*(k = 1,2,…) 在 NN 维 空间 所 通过 的 路 径 来 理解 
相对 适合 度 w* 是 随机 向 量 w* 在 NN 维 单纯 形 


AN= {z= (71,",TN) :Ti 208 T+.+ rn = 1} 


上 的 投影 . 图 5-9 阐述 了 N = 3 时 投影 情况 . 随 着 群体 一 代 传 一 代 , ww” 的 变化 可 以 
用 相对 适合 度 点 在 单纯 形 Aw 上 的 运动 来 表示 . 目 然 , 我 们 需要 弄 清 u* 的 长 久 统 
计 性 态 . 
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图 5-9 和信 是 w* 在 单纯 形 Ax 上 的 投影 


定义 T(0) 为 wW* 的 所 有 分 量 都 同时 发 生 所 经 过 的 世代 数 , 即使 三 ' 的 所 有 分 
量 都 相等 的 最 小 大 一 1. 这样 一 代称 为 等 分 量 代 . 
引 理 8.1 。 Pr{T(0) < co = 1. 实际 上 , BO < NY. 
证 明令 wl = (wl,…,wk) 是 第 一 代 的 适合 度 . 使 T(0) = 1 出现 的 一 种 方式 
是 要 后 代 群 体 有 
3 二 wi， 对 所 有 及 
其 中 


Ww 一 max{wi,.… ,WwN}. 


显然 , 这 个 事件 发 生 的 概率 至 少 是 a = (1/N)*. 于 是 PH{T(0) = 1} > o 且 
Pr{T{(0)>1}<1~-a. 
对 从 第 二 代 到 第 三 代 的 变迁 使 用 同样 的 估计 . 故 


Pr{T(0) > 2|T(0) > 1} < 1-o, 


日 
Pr{T(0) > 2} < (1 ~ a)”. 


直接 归纳 , 导出 Pr{T(0) > k} < (1 一 a)*, 于 是 E[T(0)] & lJ/a= N 及 

令 T(0)+T(1) 是 T(0) 以 后 第 一 次 出 现 等 分 量 代 的 世代 序数 , 定义 (0) 十 … 十 
T(k) 是 T(0) 十 … 十 T(k 一 1) 以 后 第 一 次 出 现 等 分 量 代 的 世代 序数 . 关键 的 是 , 过 程 
{xw*} 在 第 了 (0)、T(0) 十 T(1)、… 世代 重新 开始 , 因而 这 一 正 整 数值 随机 变量 序列 形 
成 一 个 更 新 过 程 . 为 说 明 其 中 原由 , 设 古 是 第 T(k) 代 的 公共 适合 度 . 那么 , 好 + 
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的 所 有 分 量具 有 值 六 wT 了 0)+1 的 第 ; 个 分 量 是 评 V +t!. 洒 的 影响 在 下 一 步 消失 ， 
依照 (8.1), 因为 多 项 分 布 概率 

DVT Kt! VI + 本 AN 
1 
WV +t! VT +! 
和 


i=] 


uj; 二 


也 必 无关. 由 此 , 对 于 随后 的 每 一 等 分 量 世代 , 过 程 唯一 地 取决 于 独立 同 分 布 随机 
变量 组 的 变 腊 系数 . 由 此 推 知 , 序列 工 (0),T(1),… 成 为 一 个 延迟 (滞后 ) 更 新 过 程 . 
设 NO 表示 由 {T(k)} 导出 的 更 新 计数 过 程 , Sx = T(0) +… 十 T(k 一 1), 其 中 
So = 0. 选取 世代 序数 m, 则 Svom 是 mm 世代 以 前 的 所 有 变异 之 前 的 适合 度 都 相 
同 的 最 后 一 个 世代 . 相对 适合 度 WU = (UY, 四 ,Ur ) 的 分 布 是 什么 ? 
在 时 刻 SN(m), 相对 适合 度 有 相等 的 分 量 1/N. 考虑 


Om = Mm — SN(m)’ 


它 是 SN(m) 志 m 之 间 所 经 过 的 世代 数 . 变异 作用 的 多 项 分 布 规律 在 一 整个 世代 内 
进行 选择 , 它 可 以 用 转移 分 布 函数 工 来 概括 : 


T(z1,: ,ZN; M,NN) 一 Pr{ (m1,:.* ,nN) 的 相对 
适合 度 变 成 (m1 NN) 其 中 yA < zksk 一 1,...,N}. 
因此 ， 
Pr{fur & zr, k=1,.., Nl = 1} 
ra 
从 某 一 等 分 量 世 代 开 始 , 在 变异 和 抽样 选择 作用 下 ,& 代 繁 殖 过 程 的 结果 可 用 如 下 
公式 表示 : 
Pr{ur < z;,1= 1,..…, Nlim = &} 
1 1 
=T® (a ) 
其 中 , T(9 表示 由 变换 工 导出 的 上 重复 合 转 移 分 布 . 利用 全 概率 公式 得 
m 1 1 
Pr{vu? < 27)，] 一 0 =.Prftn = TN (2 ai 
十 Pr{TZ (DO 之 mn+1(21 ZNi Ul, UN). (8.3) 


于 是 , 由 更 新 过 程 {T()} 纶 1 的 现 龄 极限 分 布 推出 


ma rt 一 人 一 ((6.5) 的 特殊 情况 ) 


5.8 更 新 理论 更 复杂 的 应 用 191 


结合 (8.2), 导出 


lim 1 Pr{vy < 27,j = 1,.…,n} 
四 1 一 PrfTU) < k} 1 1 
(a 


(读者 容易 验证 , 极限 与 求 和 号 可 交换 .) 

最 后 的 关系 式 描述 了 在 群体 进化 时 相对 适合 度 的 极限 性 质 , 实际 上 提供 了 平稳 
分 布 的 一 个 显 式 公式 
B. 分 支 过 程 

设 在 时 刻 t= 0 有 单个 生物 , 它 的 寿命 是 服从 分 布 的 随机 时 间 To. 它 的 一 生 
以 概率 p; 生出 j 个 新 的 生物 , j = 1,2,…. 每 个 新 的 生物 的 生活 和 繁殖 都 独立 于 群 
体 的 其 他 成 员 , 并 且 它 们 的 寿命 具有 同一 分 布 . 设 m = 3》 jp; 为 后 代 分 布 的 均值 
令 M(t) 表示 时 刻 t 活着 的 生物 体 个 数 的 均值 . 在 第 一 代 生物 死亡 之 后 , 应 用 全 概 
率 法 则 及 更 新 论证 法 (详细 内 容 可 参见 第 8 章 ), 我 们 得 


MI({t)= PO+ Dp | Mee-a J)dF (7) 


1_ FH)+m [ M(t — wz)dF(z) (8.4) 
0 


大 无 因子 m, 方程 (8.4) 即 为 一 个 更 新 方程 . 当 mm > 1 时 ， 我 们 可 以 将 (8.4) 变换 成 
正常 的 更 新 方程 . 取 5, 使 其 满足 人 edF(z) = 1/m. 由 于 | edF(z) 是 》 
的 严格 递减 的 连续 函数 , 且 当 入 = 0 时 取 值 为 1 当 入 一 co 时 趋 于 0, 所 以 上 述 的 
6 > 0 是 唯一 存在 的 . 
定义 

py _ ga 

F(t) m| e dF(zr), 

M(t) = e-Pt M(t), 
以 及 

g(t) =e [1 — F(t)). 

方程 (8.4) 乘 以 e708!, 得 


t 
eBtM(t) = eBtll — F() 十 / eBt-s) M(t — Zn ebrdF(z), 
0 
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用 新 的 记号 改写 成 
M(t) = g(t} + / M(t— z)dF(r). 


直接 验证 可 知 g(t) 是 直接 黎 曼 可 积 的 , 于 是 , 大 下 不 是 算术 的 , 由 更 新 定理 


此 时 ， / “g(tjqt = (m - 1)/Bm, 推 得 


mC— 1 


lim eftM(t) = -一 人 一 一 一 一 ， 
bm2 / xe-PrdF(z) 

0 
因此 当 充分 大 时 , M(t) 按 比率 e 指数 增加 . 参数 6 就 是 所 谓 Malthusian 群体 增 
长 率 . 


C. 存储 理论 


某 老板 手头 必须 保持 一 定 的 库存 商品 . 当 存 货 不 足 时 , 他 定购 新 商品 以 补充 他 
的 库存 . 实施 中 的 库存 策略 假定 是 (s, 9) 型 的 . (这 是 一 种 普通 的 作法 ) 明确 地 说 ， 
两 个 水 平 s < 9 是 事先 规定 的 . 假设 最 初 商品 在 水 平 5S, 又 明确 规定 一 个 周期 的 长 
度 , 并 要 求 在 每 个 周期 之 来 盘点 存货 .和 寿 在 某 个 周期 结束 时 , 货 存 水 平 低 于 s, 则 将 
发 出 订货 单 以 使 库存 水 平 上 升 到 9 以 备 下 一 周期 开始 供应 市 场 . 

设 X; 是 第 i 个 周期 的 累计 需求 量 . 我 们 假定 Xi1,X2,… 是 独立 同 分 布 的 正 随 
机 变量 , 分 布 沙 数 为 F. 设 Nb 是 相应 的 更 新 计数 过 程 . 显然 , N(S - s) 十 1 是 首 
次 为 补充 库存 而 发 出 订单 之 前 的 需求 周期 数 , 发 出 订单 以 后 商品 库存 又 恢复 到 水 平 
S. 略 作 思 考 即 可 发 现 , 我 们 正 涉及 两 个 过 程 : 第 一 个 是 需求 过 程 ; 第 二 个 是 补充 库 
存 过 程 . 

设 在 第 i 一 1 次 和 第 ;次 补充 库存 之 间 的 需求 周期 数 是 0;, 则 {0;} 是 离散 ( 整 
数值 ) 的 更 新 过 程 , 其 均值 为 EB(0;) = 1+ M(5 一 s), 有 是 


Pr{0; 一 k} 二 Fi1(S 一 8) 一 Fr(S 一 s). (8.5) 
令 Wn 是 第 ?个 需求 周期 末 的 存货 水 平 . 定义 Gn 为 条 件 分 布 


Cn(T) = Pr{S ~ 7 < Wnls < Wh}. 
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这 是 在 已 知 第 ”个 周期 末 存 货 水 平 不 低 于 s 的 条 件 下 第 n 个 周期 末 的 存货 水 平 的 
分 布 . 这 个 分 布 可 以 在 设 定 6% 下 计算 , bn 是 最 后 一 次 补充 库存 至 S 之 前 的 需求 周 
期 数 . (回想 一 下 , 我 们 假设 在 时 刻 0, 商品 货 存量 是 5.) 我 们 得 到 


OO 
Gn(z)= > Pr{6n = 让 Pr Xi + 十 区 和 ZX + 十 入 3 一 5} 
5=1 


_ 1 
-Do Pre -=F 5) (8.6) 
但 从 (8.5) 知 ， 
Pr{01 «< 7}} =1—F(S— s). (8.7) 


因此 , 借助 于 更 新 过 程 {0;} 的 剩余 寿命 随机 变量 的 极限 定理 ( 见 (6.2)) 及 式 (8.7)， 
我 们 推 得 


， ] 1 Fi(S—s) 
im Pr{6n, = 7} = Bot 0 > 让 = 王 Elo 
Fj(S 一 3) 
~ 1+M(S—s) (8.8) 


结合 (8.6) 和 (8.8), 我 们 推 得 


CO .Fi(z) 
lim PriS—7z< Wls < Wnt= lim Prion = 2 
于 一 CO } 2 LI ts 一 8s) 
四 
~ 1+M(S—s) 


这 给 出 了 不 急于 进货 周期 存货 水 平 的 极限 分 布 . 
D. 汽 松 过 程 的 特征 


泪 松 过 程 是 一 相当 特别 的 更 新 过 程 . 本 节 将 提出 泊 松 过 程 作为 更 新 过 程 族 中 的 
特殊 过 程 的 者 干 特 性 . 为 此 , 我 们 将 需要 利用 5.6 节 中 的 几 个 极限 定理 . 
设 {Xk} 是 一 更 新 过 程 , E[Xk] =A< oo, 且 F(z) = Pr{Xk < 2). 假定 F(0) = 0. 
定义 
J] F(z),， 对 Og<z < 
F(z) = | 1, 对 tzx. 


[与 (3.5) 对 照 ]. 显然 , 及 (7z) 是 min{ Xk,t} 的 分 布 函数 . 
定理 8.1 (a) 知 存 在 序列 {tj;}, 当 了 一 oo 时 六 一 oo, 且 现 龄 5 满足 


及 ;(z) = Pr{6t; < 2}， 对 所 有 z， 
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则 二 是 指数 分 布 . : 
(b) 车 存在 序列 {tj}, 当 7 了 一 吕 0 时 如 一 00, 且 


F(z) = Pr{%, < z}， 对 所 及 


219| [与 (3.3) 对 照 ], 则 是 指数 分 布 . 
证 明 ”由 于 (a) 与 (b) 十 分 类 似 , 故我 们 只 证 明 (a). 据 (6.5) 的 绪论, 现 龄 5 
的 极限 分 布 应 是 


im Pr{6: > 凶 = ft — F(z)}dz. 
y 
让 t 按 t; 增长 ( 见 定理 的 假设 前 提 ), 我 们 导出 函数 方程 
1 P=! | {1 Fajdz 
y 
右 端 式 子 显然 对 y 是 可 微 的 , 因而 得 到 初等 的 一 阶 微分 方程 
d 1 
gt! -Fl(y)} = -zt! —F(y)}, 


满足 F(0) = 0 的 解 是 
1—F(y)=e YY, A=1/p, 


即 为 所 证 . 呈 
定理 8.2 ” 设 对 某 to > 0, 成 立 


Pr{d: < zx}= F(z), Ogt<to,rT 0. 


则 对 某 入 > 0, 使 得 R(z) =1 一 e ,0<z<to. 
证 明 对 0<z<t 有 


Pr{édt < x}= Spr{d, <zHN(t)= 


j=1 

= >_Pr{ft-z<5,; <tHS;r1>#t 
j=1 
co pt 

= 》_ / (1 — F(t — ldF:;(y) 


ty 
| 
i 


/ [1 — F(t— ydAM(y). 


I 


5.9 更 新 过 程 的 登 加 195 
于 是 , 由 假设 知 , 对 0< z < t < to, 成 立 
Pa= | i _ F(t — WaM(y) (8.9) 
是 | 
lp@)=2 / -Fe Wa (8.10) 


函数 M(t) 是 有 限 、 右 连续 、 不 减 的 , 并 且 对 稠 于 任 一 区 间 (0, to] 的 无 限 多 个 t, 具 
有 有 限 导 数 M'(). 选择 t= 使 Mr) < oo0. 则 当 zz 递减 趋 于 0 时 , (8.10) 在 t=7 
有 极限 , 且 

F’(0) = {1— F(O]M'(7) = M'(7). 


但 是 , 因 (8.10) 的 左 问 写 t 无关 , 故 对 所 有 t 右 极限 必须 存在 , 且 对 所 有 + 上 < t 如 有 
下 (0) = M'(t). 


令 和 = (0), 于 是 M(t) = Xt. 将 此 代入 (8.9), 得 


F(z) = / [1 F(t ~ WXdy. 


对 z 微分 , 得 
dF(z)/dz =—A1— F(x), Og<z<to 
或 
F(z)=1-e”*, Og<zr<tto, 
证 毕 . 量 


5.9 ”更新 过 程 的 和 合 加 


本 节 指 出 , 在 一 定 条 件 下 无 限 多 一 致 稀疏 更 新 过 程 的 登 加 是 泊 松 过 程 . 正如 中 
心 极限 定理 表明 正 态 分 布 在 相当 广泛 条 件 下 可 用 来 描述 某 些 随机 变量 那样 , 定理 
9.1 将 给 出 在 许多 场合 下 泊 松 假设 成 立 的 重要 依据 . 

我 们 还 要 特别 介绍 几 个 附属 于 更 新 过 程 登 加 的 其 他 结果 , 以 引导 读者 对 当前 某 
些 热 门 的 研究 领域 有 所 了 解 . 

对 每 个 整数 nn = 12…… 和 每 个 i 二 1,…,kn, 其 中 当 n 一 oo 时 各 一 oo， 
令 Nnilt) 表示 具有 间隔 时 间 分 布 为 Fi(t) 的 更 新 计数 过 程 . 集合 {Nnilt);n = 
1,2,… ,i 二 1,…, kn} 构成 随机 过 程 的 三 角 阵 . 对 每 个 m 我 们 假设 过 程 {Nn1(t)},:……， 
{Nnk, (t)} 是 独立 的 . 


220 


221 


196 第 5 章 更 新 过 程 
所 谓 登 加 过 程 N,(t) 是 指 一 列 计数 过 程 之 和 : 
Rn 
Nn(t) = 》 Nni(t), t>0. 


但 登 加 过 程 一 般 不 是 更 新 计数 过 程 , 这 是 由 于 其 间隔 时 间 不 相互 独立 , 也 不 同 分 布 . 
事实 上 , “事件 ” 之 间 区 间 长 度 的 分 布 往往 是 复杂 而 难以 处 理 的 . 
定义 9.1 三 角 阵 {Nni(t)} 称 为 无 限 小 的 , 如 果 对 于 每 个 :>0 有 


lim max Fi(t) = 0. (9.1) 


n=00 1&i<Kkn, 


在 证 明 主 要 定理 之 前 , 先 给 出 一 个 预备 引 理 . 
引 理 9.1 设 {Nni(t)} 是 间隔 时 间 分 布 为 {Fni(t)} 的 无 限 小 阵 . 令 F(t) 表 
示 Fnilt) 的 j 重 卷 积 . 阁 存 在 某 个 有 限 不 减 函 数 c(t), 对 任意 t 满足 
kn 
lim sup 》 Fni(t) < c(t), (9.2) 


nO0 ~ 
t 二 ] 


则 
ou- 


i=1 j=2 


lim YS pd) 


?4 一] 7 二 2 
kn 

(9 lim >》 FY() =0, 且 关于 j=2,3,… 是 一 致 的 . 
i 二 1 


证 明 ”我 们 仅 证 明 (a); (b) 和 (c) 易 由 不 等 式 F(t) < [Eu 人 bj 参见 (4.2)] 推 
得 . 令 


kn kn 
An(t) = > 》 [Fa 人] 


i=1 j=2 


任 给 ss > 0 和 + 上 > 0 由 于 {fi(t)} 是 无 限 小 的 , 故 存在 no 使 得 对 于 1 = 1,… ,kn 和 
任何 n>no 有 


Fni(t) & &. 


于 是 , 对 于 n > no 且 沿 着 (9.2) 中 取 上 极限 的 子 列 增加 , 我 们 有 
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An(t) < > 》 6 222 


由 于 s > 0 为 任意 的 , 我 们 得 到 


lim sup An,(t) = 0， 
+ OO 


本 
定理 9.1 设 {Nni(t)} 是 至 加 过 程 Nn(t) 的 更 新 过 程 的 无 限 小 阵 . 则 
lim Pr{Nn(t) = 有 1} = 一 后- j= 0,1,2,.…, (9.3) 
当 且 仅 当 
k,, 
im DFnilt) = Xt. (9.4) 


证 明 (1) 必要 性 假设 (9.3) 成 立 . 对 于 了 = 0, 得 
lim Pr{Nn(t) = 0} = et 
或 等 价 地 ， 
lim [- InPr{Nn(t) = 0}] = Xt. 
由 条 件 知 Nn 1(t), 四 , Nnkn(t) 是 非 负 独立 随机 变量 ， 从 而 
Kk 
— InPr{N,(t) = 0}=— mn Pr{Nni(t) = 0} 
3 一 工 
kn 
=— Dnll - ri 人 
i=] 
利用 泰 葛 级 数 展开 得 


-ln[l — Fi(t)] = 2, [Pu (2)y, 
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198 
我 们 有 
A 和 t= lim | 一 In Pr{ Nn(t) = 0} 
kn kn oo 
一 Lim { >, Fni(t) 十 2》, 2》, Pu 人 
4 一 1 4 一 1 7 一 之 
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由 于 上 式 第 二 项 和 式 是 非 负 的 , 故 
kn, 
lim sup 2》 Filt) < Mt, 


N00 二] 
再 利用 引 理 9.1 推 得 第 二 项 和 式 极限 为 0, 故 
kn, 
A= lim > Fri 人 th) 
并 


(9.4) 式 证 毕 . 
(2) 充分 性 假设 (9.4) 成 立 . 我 们 对 m 使 用 归纳 法 证 明 


-At OD™ , m = 0, 1,...…. 
ml! 


lim Pr{Nn(t) = m}=e 


步骤 1: m = 0. 同上 , 使 用 泰 勤 级 数 展 开 可 得 


jn 
Pr{ Nn(t) =0}= |[f: ~ Fi) 
Kk, kr oo F,, f 7 
一 exp | 一 2 Fnilt) 一 > =] 


《一 t=1 9 二 


利用 假设 (9.4) 和 引 理 9.1, 上 式 指 数 的 极限 为 -~ 六 因此 
im Pr{N,(t) = 0} = exp{ 一 多 上 
步骤 2: 归纳 推理 步骤 . 现 假设 命题 对 于 m 一 1 成立, 即 
. ee 人 (一 
im Pr{Nn(t)=m—1}= m1 
以 下 证 明 命题 对 于 m 也 成 立 . 令 s1,…, sr 是 有 限 指标 集合 . 由 无 限 小 阵 的 定义 知 


I[ -F(t)]=e™, (9.5) 
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对 每 个 固定 7, 此 极限 关于 指标 s1,…, sr 是 一 致 的 . 现 有 
Pr{ Nn(t) = m} = P(t) + Qn (t), 


其 中 
P(t) = Pr{Nn(t) =m 和 Nni(t) & 1,% = 1,.., kn}, 


和 
Qn(#) = Pr{Nn(t) = m 和 Nni(t) > 2, 对 于 某 个 计 . 
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现 证 明 当 一 00 时 Qn(t) 一 0. 事实 上 , 对 任意 es > 0, 者 n 足够 大 满足 Fi 和 < 时 ， 


我 们 有 
kn 
Qn(lt) < 2_Pr{Nnilt) > 2} 


t+ 二 1] 


这 样 , 利用 假设 (9.4), 我 们 有 


lim sup @ (t) < EAXt， 
+ OO 


既然 e 是 任意 的 , 故 当 m 一 oo 时 , Q(t) 一 0. 下 面 来 求 P,(t) 的 极限 值 , 设 I(m) 是 


所 有 满足 1 < i; < kn 的 可 能 组 合 (i,… ,im), 则 


已 由 = Pr{Na(t) =m 和 Nailt) < 1, i = 1,..., kn)} 


= 》 Pr{Nnalt) = 1,..., Nnin,(t) =1 和 Nni(t) = 0,1 ¢ I(m)} 
IT(m) 


1 


kn 
= 一 >_Pr{Nni(t)=1, Na(t) — Nni(t)=m—1, 和 Nas(t) < 1,j=1,.… 
+ 一] 


kn 
= 了 二》 Pa — Fae?(0)} Rnd) 


?一 1 
(此 处 利用 了 Nni(t) 相互 独立 的 假设 ) 其 中 


Rnilt) 一 Pr{ Nn,(t) 一 Nnilt) 一 ?一 1， Nnj(t) < 1,7 一 |， 一 ,kn, 关 i}. 
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但 由 妇 纳 假设 及 (9.5) 知 , Rni(t) 一 e- 竺 (2)m/(m 一 1)!, 当 n 一 00 时 , 此 极限 关 
于 i 是 一 致 的 . 因此 ， 


1 er” 
Jim Pa(t)= lim 一 2 {Pn (t) — Fx? (t)} Rnilt) 


k 
。 1 三 . 一 人 ?2 一 1 1 
im 3 Failt)e (At /(m— 1)! 


il 


~ et(M)™ /ml, 


定理 得 证 . 图 
例 1 设 F(t) 是 满足 (0)=0 和 所 (0) = 入 >0 的 分 布 函数 . 令 


Fni(t) = P(t/n), i=1,.,n, 


对 所 有 m, 设 Nni(t),i = 1,…,n, 是 间距 分 布 为 Fi 的 相互 独立 的 更 新 计数 过 程 . 那 
么 ， Nnilt) 是 三 角 阵 . 而 且 由 于 
lim max Fni(t) = im F(t/n) 一 0 


N+O0 ] iCNn 


推 知 此 阵 是 无 限 小 的 . 为 验证 (9.4), 我 们 计算 
im SN Filt) = im nF(t/n) 
_ ,1 F(t/n) 


ni— 00 t/n 


= At. 


因此 , 登 加 过 程 N,(t) 的 分 布 收 敛 于 泊 松 过 程 . 

在 本 节 结 束 时 , 我 们 介绍 作为 更 新 过 程 组 成 部 分 的 泊 松 过 程 的 两 个 特征 . 两 个 
独立 泊 松 过 程 之 和 仍然 是 油 松 过 程 , 只 不 过 后 者 的 参数 是 前 面 的 两 个 对 应 参数 之 和 . 
下 面 我 们 将 指出 , 在 更 新 过 程 中 只 有 泊 松 过 程 才 具有 上 述 性 质 . 

定理 9.2 设 和 Ni(t) 和 N2(t) 是 两 个 独立 更 新 过 程 , 上 且 具 有 相同 的 间距 分 布 
(其 均值 记 为 1). 令 N(t) = 和 Ni(t) 十 Nz(), 如 果 NN(t) 也 是 更 新 过 程 , 则 N1(t), N2(t) 

和 Nb 都 是 泊 松 过 程 . 
证 明 设 H 是 NN(t) 的 间距 分 布 ,那么 
1 ~ H(z)= Pr{N(z) = 0} 
一 PrfAi (Z) 一 0, No2l(7) = 0} 
一 [1 一 五 (z)]“. 
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令 1),q2( 和 y(t) 分 别 是 过 程 Nt, Na 和 NN 在 时 刻 t 的 剩余 寿命 ,由 于 Ni 和 
N2 组 成 N, 因此 必定 有 
Y(t) = min{Y(t), 72(t)} 
和 
Pr{y(t) > z} = [Pr{%(t) > z}H 
成 立 . 令 上 一 o0, 并 利用 式 (6.5) 中 剩余 寿命 的 渐 近 分 布 , 我 们 有 


2;/ 1 — H(y)dy = a{ / Mt —F (wlay} ， (9.6) 


其 中 = / “1 一 友 (yjJdy. 两 边关 于 z 均 可 微 工 需 注意 1_ Htz) = [1 一 F(z)]2, 微 
分 (9.6) 得 


-Fl )] = H(z)] = a{/ 1—F (ldyf (1 — F(z)), 


或 
1-FG)= 需 / 1 - F(y)jay. 


记 G(7Z) = 1 一 了 F(z). 对 上 式 求 微分 , 得 
dG{(z) 
dz 
在 初始 条 件 G(0) = 1 之 下 , 其 解 为 
Cl(z) = 1 F(z) =e™”?, 


其 中 入 = 2v/p*. 这 样 , Ni(t) 和 Na 的 丝 为 泊 松 的 , 从 而 , 其 和 N(t) 也 是 泊 松 的 . 国 
定理 9.3 ” 设 Ni 人 是 参数 为 4 的 泊 松 过 程 ,N2(t) 是 具有 有 限 平均 间距 的 更 
新 过 程 . 在 Ni(t), Nz(t) 相互 独立 且 NO = Ni 由 + Nzlt) 是 一 更 新 过 程 , 则 N2(t) 必 
定 也 是 泊 松 过 程 . 
证 明 ”我们 使 用 定理 9.2 相同 的 技巧 . 设 Ni, Na 和 N 分 别 具 有 间距 分 布 
1 — et/t,G(t) 和 H(t). 则 


27 


1 ~ H(t) = {1 — G(t)}}e-t/r, (9.7) 


co -YA ooc 
二 / [1-H(y)ldy = 一 / 1 — G(y)]dy, 


1. 大 下 是 连续 的 , 这 是 显然 的 . 一 般 情况 需 进一步 论证 . 


上 
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其 中 jy 和 jc 分 别 表示 五 和 G 的 均值 . 
对 上 式 求 微分 , 得 


een _ Hla) = Gla) + se f -cldy 


HG _1/™ 
1 -Go [Ee 1] = ;| -cowly (9.8) 
今 
HG _ 1 
入 = | 这 1|， 和 F(x)=1— Gfz) 
对 (9.8) 求 微 分 得 
一 AdEZ)/dz 一 下 (2Z) 
或 
P(z) 一 ez 人 7>0， 
即 得 
G(z) =1—e-*/ zx>0, 
定理 证 毕 . 国 
初等 问题 
1. 若 Pr{X; = 1} = ,Pr{X: = 2} = 5, 试 计算 
pp Pr{N(1) = k}, Pr{N(2) = k}, Pr{N(3) = k}. 


2. 一 个 病人 到 医院 候诊 室 ,以 概率 1/5 即刻 就 诊 , 以 概率 4/5 需 延 迟 一 个 小 时 . 经 过 一 个 
小 时 等 候 之 后 , 又 以 概率 1/5 即刻 就 诊 , 以 概率 4/5 再 延迟 一 个 小 时 , 如 此 等 等 

(a) 首次 到 达 等 候 时 间 的 分 布 是 什么 ? 

(b) 假定 到 达 病 人 数 服 从 参数 为 1 的 泊 松 过 程 , 并 且 每 次 到 达 都 遵循 上 述 相同 的 模式 , 试 
求 至 少 需 候诊 8 小 时 的 病人 数 分 布 . 

3. 设 某 地 4 的 天 气 情 况 分 上 晴天 和 雨天 两 种 . 每 次 雨天 持续 的 天 数 服从 参数 为 2 天 的 泊 松 
分 布 , 而 晴天 是 服从 均值 为 7 天 的 几何 分 布 . 假定 晴天 和 雨天 持续 的 时 间 是 彼此 独立 的 . 试 求 
长 久之 后 , 在 给 定 的 一 天 中 是 雨天 的 概率 为 多 少 ? 

4. 设 个 体 的 随机 寿命 分 布 函 数 为 F(z), 试 求 使 用 时 间 为 z 的 个 体 平均 剩余 寿命 . 

解答 ， 


{1 FO)}at 
e(z) 一 ElX 一 rlX > x| 一 FG ~ 


已 题 203 


5. 设 寿命 分 布 函 数 F(z) 具有 概率 密度 函数 FLz)， 函数 7(z) = f(z)/[1 ~ F(z)] 称 为 
hazard 比 . 试 证 明 使 每 单位 时 间 长 久 平均 费用 
g(7) Cl [1 ~£(D 十 cz 天 (人 了) 
| 上 1 一 已 (zjjdz 


达到 最 小 的 替换 时 间 7T” 必定 满足 


C2 — C1 


了 cl 
r(T*) x / (1 ~ F(x)dz — F(T*) = 


6. 假设 汽车 相继 到 达 一 大 门 前 , 每 辆 汽车 的 随机 长 度 工具 有 分 布 函数 (6). 第 一 辆 汽车 
到 达 并 在 大 门 前 停车 . 以 后 每 辆 汽车 相继 到 达 并 以 一 定 距离 停靠 在 前 一 辆 汽车 的 后 面 , 此 距离 
服从 [0,1] 上 均 久 分布. 考虑 这 一 串 排 成 队 的 汽车 , 记 Ns 为 距离 大 门 不 超过 z 的 汽车 数 . 若 
(i) F(é) 为 退化 分 布 , 即 F(&) = c; (i F(&) = 1 一 e“, 试 分 别 确定 其 


lim EI[INz|/zx. 


解答 , 2/(1 十 2c) 和 2/3. 

7. 设 在 每 天 初始 的 时 间 段 内 顾客 到 达 出 租 汽车 站 的 时 刻 排 成 分 布 律 为 F(z) 的 更 新 过 程 . 
假定 出 租 汽车 有 无 限 多 , 且 每 个 顾客 在 站 上 所 付 的 钱 服从 分 布 律 CG(z), x > 0. 

Qi) 试 写 出 在 一 天 的 时 刻 t 之 前 出 租 汽 车 站 收入 总 和 的 表达 式 . 

(iD 试 确定 极限 

lim EE[ 在 第 一 个 t 时 间 内 的 收入 ]/t. 

8. 考虑 型 [[ 的 计数 器 . 每 次 脉冲 到 达 之 后 闭锁 固定 的 7 单位 时 间 . 假定 脉冲 到 达 遵 循 参 

数 为 和 的 泊 松 分 布 . 试 确定 计数 器 在 时 刻 t 开放 的 概率 p(t). 


解答 ， 
一 Xt 
e ′ 和 和， +<T, 
p(t) = 
| e*7 t+t>7. 


加 题 
1. 设 一 更 新 过 程 具有 寿命 密度 


pe“?(7-6), >56, 
/y= 
其 中 6 > 0 是 固定 的 . 试 求 Pr{N(t) > k}. 

2， 设 某 生物 体 寿命 是 一 具有 分 布 函数 F(z) 的 随机 变量 ,在 其 一 生 中 依照 强度 函数 为 
A(w) 的 非 齐 次 泪 松 过 程 繁殖 后 代 . 每 一 后 代 又 独立 地 依照 同样 概率 规律 产生 其 后 代 . 这 样 , 群 
体 不 断 往生 发展. 车 ， 

1 < / {1 — F(w}A(Wdu < oo 
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试 证 明 平均 群体 总 量 m(t) 渐 近 按 速率 为 > > 0 的 指数 增长 , 其 中 7 是 如 下 方程 的 唯一 解 ， 
1 = / el F(A(wau. 


提示 : 设 B(t) 是 至 时 刻 t 为 止 所 繁殖 个 体 的 平均 数 , 先导 出 关于 B(t) 的 更 新 方程 , 由 此 
推出 B(t) 依 速率 7 指数 增长 , 然后 用 B(w) 表达 m(t), 其 中 << +t. 

3. 试 证 明 lim V(t)/t = 0 /1 其 中 V(t) 是 更 新 过 程 N(t) 的 方差 , jy 和 oo? < co 分 别 
是 间距 分 布 的 均值 和 方差 . 

4. 对 于 具有 分 布 F(z) 的 更 新 过 程 , 试 计算 


p(t) = Pr{ 在 (0,4] 更 新 次 数 为 奇数 }. 


GD 当 F(z) 是 参数 为 \ 的 泊 松 分 布 时 ; 四 当 F() = / zerzdz 时 ,分 别 具 体 计算 之 


0 
5. 沿 厦 一 对 染色 体 的 纵向 依照 参数 为 和 的 泊 松 过 程 出 现 破 裂 和 重新 组 合 . 为 说 明 清 楚 ， 
设 破裂 出 现在 点 和 上 


4 + Y B 
gg 
则 重新 组 合 的 染色 体 具 有 形式 
4 t t, B 


试 确定 距离 为 1 的 两 点 4, B, 当 重 新 组 合 后 仍然 在 相同 染色 体 上 结合 的 概率 . 
6. 试 证 明 对 应 于 寿命 密度 为 


f(z) = Nzre *”, zr>0 


的 更 新 函数 是 
M(t) = MG 一 er2x9) 

7. 在 整体 替换 模型 中 , 设 ci 是 计划 替换 的 费用 ,ca 是 因 元 件 损坏 而 替换 所 需 的 费用 . 利 
用 长 久 运 行 每 单位 时 间 平 均 费 用 公式 [ci + caM(T)]/, 证 明 使 花费 最 小 的 整体 替换 时 间 2” 
应 满足 

e-2XT (1 +2AT*) = 1— (4ci/c2), 

其 中 ca > 4ci, 并 且 其 寿命 密度 恰 为 问题 6 中 的 f(z). 
XI 十 十 … 十 XK 二 < XY 十 … 十 XFL1 的 最 小 下 标 n. 试 求 


lim E(NE)/k. 


提示 : 证 明 并 利用 恒等式 E(Sn+1) = 已 (Ne +1T)B(XT) 其 中 Sr = XY 十 .十 Xr， 
六 一 1 2. 

9. 试 确定 泊 松 过 程 全 寿命 B 的 分 布 . 

答案 ; Pr{B: < x} = 二 1 [+ 和 Amin{t, zhje *”. 

10. 试 证 明 在 更 新 过 程 中 , 被 视 为 一 个 随机 过 程 的 现 龄 {61;t > 0} 是 一 马 氏 过 程 ， 并 求 其 
转移 分 布 函 数 


FPF(y;t, x) = Pridstt < Yds = 2}. 


11. 设 4(b) 是 更 新 方程 A(t) = ab 二 人 A(t -dF(y) 的 解 , 其 中 afb) 是 满足 a(0) = 
的 有 界 不 碱 函 数 . 试 证 明 lim A(t)/t = ar/1 其 中 or" = Jim alt) 且 p< oo 是 F(z) 的 均值 

12. 设 一 系统 有 两 个 状态 ，“ 开 "与 “ 关 *， 任 一 时 刻 系统 仅 处 于 其 中 一 个 状态 . 在 时 刻 0 它 
处 于 “ 开 * 状态 , 在 关闭 之 前 它 运行 的 随机 时 间 工具 有 分 布 函 数 1 e-. 继而 进入 “ 尖 ” 状 
态 , 其 间 随 机 时 间 T。 具有 相同 分 布 函数 1 _e- 人 .之 后 系统 进行 修理 . 处 于 上 述 “ 开 ”、' 关 
两 种 状态 的 随机 时 间 是 彼此 独立 且 同 分 布 .如 此 循环 交替 . 令 W(t) 表示 在 时 间 区 间 (0,) 内 
系统 运行 ( 即 处 于 “ 开 ” 状态 ) 的 全 部 时 间 , 试 确定 W(t) 的 均值 

13. 对 具有 密度 隔 数 为 


的 随机 变量 进行 连续 独立 的 观察 , 直到 观察 次 数 之 和 超过 t， 其 中 N + 1 为 所 需 的 观察 次 数 . 
试 证 明 
© 
FT Tnt) 


14. 更 新 过 程 是 记录 在 (0, 出 现 的 点 的 数目 的 非 久 整 数值 随机 过 程 , 而 点 出 现 的 间隔 时 
间 是 独立 同 分 布 , 其 共同 分 布 函数 为 F(z)( 当 xz > 0) 或 为 0( 当 xz <0), 且 F(z) 在 z=0 是 
连续 的 . 所 谓 修 改 更 新 过 程 是 指 上 述 间 滞 时 间 分 布 F(z) 在 x = 0 具有 跳跃 g 的 一 种 更 新 过 
程 . 试 证 明 修 改 更 新 过 程 等 价 于 一 个 普通 更 新 过 程 , 但 其 中 在 每 次 到 达 的 所 记录 点 的 数目 是 独 
立 同 分 布 的 随机 变量 Ri, R2,…; 其 分 布 为 


22 十 上 —t tne™t 


Pr{N =n}= 


Pr{Ri =n}=pg" ", n=1,2,..: 


此 处 1 二 1,2,.…， 人 一 十 一 49. 
15. 考虑 具有 间距 分 布 晴 数 为 F(z) 的 更 新 过 程 . 令 W 表示 这 样 一 个 时 间 , 使 得 从 上 一 次 
更 新 事件 发 生 至 此 时 的 时 间 长 度 第 一 次 超过 上 > 0( 因 定常 数 ). 试 确定 
V(t) = Pr{W < 


所 满足 的 积分 方程 并 计算 EB[W]. (假设 有 一 个 事件 发 生 在 t = 0) 


| 
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233 


206 第 5 章 更 新 过 程 


16. 考虑 间距 分 布 为 F(z) 的 更 新 过 程 N(t), 记 melt) = E[N(t)"]. 证 明 mx(t) 满足 更 新 
方程 


mx{(t) = zk(t} + 人 ak 人 一 T)dFE(T)， 大 一 1 2 
6 
其 中 


t k—1 
zk(t) 一 / > © mi(t — TT)}dF'(7). 


提示 : 利用 更 新 论证 法 . 
17. ( 续 上 ) 用 归纳 法 证 明 


z(t) = (—1)*-! ro - 0 mi(t) + + (1) 0， “ | mk-ig| 


18. 考虑 仅 有 两 个 状态 4 和 B 的 随机 过 程 X(t), t > 0, 用 ,91,&2;72,… 分 别 表示 状 
态 相 继 喜 留 在 4 种 B 的 时 间 , 并 设 X(0) 处 于 状态 4. 假定 66 是 独立 同 分 布 随机 变 
量 , 其 分 布 为 F(E),m1, 72，…… 也 是 独立 同 分 布 随机 变量 , 其 分 布 为 G(m). 用 Z(t) 和 W(t) 分 
别 表示 在 时 间 区 间 (0,t) 内 处 于 状态 4 和 B 的 总 逗留 时 间 . 显然 , Z(t) 和 W(t) 是 随机 变量 
月 2Z( 引 十 W(t) =t 令 Nt) 是 由 右 ,é2,… 产生 的 更 新 过 程 . 定义 


0(t) = 二 2 二 二 WN). 
试 证 明 
P{W(t) & 2} = P{9(t ~ 7) <& 7}, 
并 使 用 分 布 F 和 G 表达 此 式 . 
答案 ， 
Pr{W(t) < 2} = > Gn(z)[Fn(t — 7)— Fnrilt — 7)), 


nn 二 0 
其 中 Gn 和 F, 是 通常 意义 下 的 卷 积 . 
19. 考虑 间距 分 布 为 F(x) 的 更 新 过 程 , 假设 每 个 事件 以 概率 1 一 g 消失 , 并 以 因子 1/9 扩 
大 时 间 尺 度 . 试 证 明 所 形成 事件 列 构成 一 个 更 新 过 程 , 其 间距 分 布 为 


>》 (1— gq" gqFn(z/q) = F(z;q), 
其 中 五, 仍 表示 FF 的 n 重 卷 积 . 
20. ( 续 上 ) 在 前 面 问题 中 , 设 p(s) 是 了 (x) 的 拉 普 拉 斯 变换 . 试 求 F(z;g) 的 拉 普 拉 斯 变 
换 . 
答 业 ， 
q4(sg9) 


85 一 和 (1 — q)$(sgq) 


1 


21. ( 续 上 ) 阁下 具有 二 阶 矩 , 试 证 明 当 g 一 0+ 时 , 对 所 有 s, Re s > 0, 有 


入 
$(s;q) 一 rt 


其 中 入 = 人 rdF (zr). 


22. ( 续 上 ) 利用 第 1 章 收 敛 性 定理 证 明 
F(z;q) 一 1—e™’”, 当 g 一 0 十 . 


23. 考虑 间距 分 布 为 Go(z) 的 更 新 过 程 . 假定 每 个 事件 以 概率 9 保留 , 以 概率 1 一 g 除 掉 ， 
并 且 时 间 尺 度 以 因子 1/9 扩大 ( 见 问 题 19). 试 证 明 对 于 原来 的 和 新 的 过 程 , 其 平均 间隔 时 间 
是 相同 的 . 重复 上 述 去 除 事件 和 扩大 时 间 尺 度 的 步骤 ,从 而 得 到 一 列 更 新 过 程 , 其 中 原 过 程 经 
过 这 样 n 次 变换 之 后 所 得 更 新 过 程 的 间距 分 布 记 为 G(,)(7z). 在 所 有 这 些 变换 中 9 是 固定 的 . 
试 证 明知 0 < g < 1, 则 


lim Gn) (7) 一 上 一 e 


EK 中 p= 人 得-Go(9]de 
0 
提示 ; 丑 _ _ 
一 -3 1G ， ; 一 -sd ‘ ， 
do 人 / etdGo(€), i(s) / eedGi(6) 
用 归纳 法 证 明 
pn(s) = 二 和 
1 一 (1 一 92)go(sg”) 
令 n 一 00 即 导出 与 问题 20~22 相同 的 结果 . 

24， 设 有 同 分 布 的 更 新 过 程 三 角 阵 Nis(t), 1! < i < 其 中 间隔 时 间 具 有 均值 为 4 的 
分 布 F()， 考虑 该 阵 的 第 n 排 , 在 此 排 的 每 个 过 程 中 , 均 以 概率 1/n 保留 一 个 事件 , 以 概率 
1 - (1/n) 抛弃 一 个 事件 , 这 个 程序 独立 地 应 用 于 所 有 事件 . 通过 这 样 删 除 手续 所 得 到 的 一 个 
新 的 更 新 过 程 三 角 阵 , 记 为 N*,(t). 然后 把 它们 登 加 得 


Nn(t) = 3 Naij(t), lg&n<oo. 
j=1 
试 证 明 
—t/p . 

im Pr[{N"(t) = j] = 人 A) ， 
当 且 仅 当 瓦 提 三 1 一 e .换言之 , 玲 加 过 程 收敛 于 泊 松 过 程 当 且 仅 当 原 有 的 更 新 过 程 是 泊 
松 的 . 

答案 : 首先 证 明 新 阵 Nj;(7) 是 无 限 小 的 , 即 证 明 


lim | sup Fx,(t)| = 0, 
Tigijgn 
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其 中 F(t) 是 转换 过 程 Ni(t) 的 间距 分 布 . 事实 上 , 按 问 题 19 的 论证 方法 , 我 们 有 
m0)=5 (1-1) Ln 


j=1 


< DP < EHFOF 


其 中 各 F(t) < 1, 显然 有 im [sup | = 0. 者 f(t) = 1, 我 们 可 以 确定 一 个 适当 的 7 使 


得 Fj(t) < 1, 从 而 可 得 到 类 似 结果 . 
进一步 应 用 区 加 定理 9.1, 得 


= t/h, 


这 等 价 于 F(t) = 1 et/r. 

25. 已 知 一 具有 有 限 均 值 的 更 新 过 程 , 假设 对 所 有 t 剩余 寿命 Y 和 现 夫 4 是 独立 随机 变 
量 , 试 证 明 此 过 程 是 泊 松 的 . 

提示 : 在 恒等式 


Pr{dt > z,Yt > 外 = Pr{o > T}Pr{Y > y}, 
中 , 利用 5.5 节 中 的 极限 定理 , 可 导出 关于 
1 总 局 
oo) = 37/ -rl 


的 函数 方程 , 由 此 推 得 1 -- F(t€) = e /4 

26. (a) 着 一 批 订 贷 单 依照 参数 为 和 的 泊 松 过 程 到 达 某 中 心 办 事 处 , 假设 完成 每 一 订货 单 
任务 需要 分 布 为 F(E) 的 随机 时 间 . 我 们 假定 拥有 非常 多 工人 , 使 得 所 有 订货 都 不 推 延 地 予以 
处 理 . 令 W(t) 表示 在 时 刻 t 之 前 已 发 出 订单 但 尚未 完成 的 订单 数 . 试 求 


lim Pr{W(t) < &}. 


(b) 设 V(t) 表示 在 时 刻 0 没有 未 完成 的 订货 情形 下 完成 所 有 至 时 刻 t 的 订货 任务 所 和 需 的 
时 间 . 试 求 V(t) 的 概率 分 布 , 即 求 


Pr{V(t) <y} = Fl(y,t). 
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提示 首先 假设 第 一 次 定货 到 达 的 时 间 , 继而 写 出 关于 FF(y,t) 的 递 推 关系 式 

27. 连续 函数 g(zj,z > 0 的 拉 普 拉 斯 变换 为 9*(9) = | e-9zg(z)dz, 其 中 0 > 0. 若 一 
更 新 过 程 具 有 寿命 密度 函数 f(z), m(t) = dM(t)/dt 是 其 渴 新 消 数 的 导数 . 试 证 明和 公式 

“o,f(0) 

若 (i) f(x) = Xe ,x > 0; (i) f(z) = ze ?,z > 0, 分 别 具 体 计算 其 m*(9). 

28. 设 一 更 新 过 程 具 有 均值 (o? 十 jw)/24, 其 中 o* 和 4 分别 是 间距 分 布 的 方差 和 均值 . 
试 求 其 现 礁 随机 变量 545 当 t 一 co 时 的 极限 分 布 . 

29. 设 一 更 新 过 程 间距 分 布 的 均值 各 方差 分 别 为 yp 和 o?, 56: 是 其 现 龄 随机 变量 . 试 证 明 


Jim > 人 6rdr = (0 + p22)/2pn. 
30. 者 XX1, XX2,… 是 更 新 过 程 中 间隔 时 间 . 大 Pr{Xxk 二 1} 二 p 和 Pr{Xk =2}=9g= 
1 一 p. 试 证 明 
gq 9 
1 
其 中 Nn 是 至 时 刻 (离散 时 间 )m 为 止 的 平均 更 新 数 . 


参考 书目 


W. Feller, An Introduction to Probability Theory and Its Applications, Vol. II. Wiley, 
New York, 1966. 


1 = 2,4,.…， 
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第 6 章 思 


随机 过 程 被 它们 的 随机 变量 之 闻 的 依赖 关系 所 刻 划 ， 著 所 表示 的 关系 大 量 出 
现在 各 种 问题 中 , 它 已 成 为 理论 的 和 应 用 的 概率 论 基 本 工具 , 可 用 于 计算 吸收 概率 ， 
分 析 连 续 时 间 过 程 的 轨道 结构 , 导出 有 关 随 机 过 程 的 不 等 式 , 分 析 序 贯 决 策 和 控制 
模型 以 及 大 量 其 他 用 途 . 

鞭 理 论 需 要 广泛 使 用 条 件 期 望 , 因此 建议 读者 复习 列 在 第 1 章 的 有 关 条 件 期 望 
的 性 质 . 


6.1 初步 定义 和 例子 


我 们 从 靳 概念 的 最 早 形 式 开 始 , 它 虽然 已 过 时 , 但 仍然 是 有 意义 的 . 

定义 1.1 一 个 随机 过 程 {Xn;n = 0,1,…} 是 一 个 加 , 如 果 对 于 n = 0, 1,…- 

(i) E[|Xn|] < %, 

(ii ElXn +1ilXo, ,Xn| = Xn. 

设 X 是 赌 徒 在 第 n 次 赌博 时 所 拥有 的 财富 . 靳 的 性 质 体现 “公平 赌博 ”的 概 
念 . 在 这 种 赌博 中 赌 徒 在 下 一 次 赌博 将 拥有 的 财富 按 平均 来 说 与 现在 的 财富 是 一 样 
的 , 不 受过 去 情况 的 影响 . 事实 上 ，' 摇 ”的 名 称 来 自 一 种 赌博 策略 的 法 文 首 字 母 缩 
略 词 , 这 种 策略 就 是 一 直 加 倍 赌 注 直 到 取胜 为 止 . 现在 , 靳 理论 已 应 用 于 一 般 概率 
理论 和 数学 分 析 的 许多 分 支 和 多 种 领域 . 大 仪 限于 赌博 来 考虑 拷 理 论 是 不 适当 的 ， 
并 易 使 人 误解 . 

关于 缺 的 更 加 一 般 和 贴切 的 定义 我 们 将 在 6.7 节 详 细 论 述 . 除非 另外 说 明 , 下 
面 遇 到 的 所 有 随机 变量 都 假设 为 实 值 的 . 

定义 1.2 设 {Xn,n=0,1,…} 和 {Yh,n = 0,1,…} 是 两 个 随机 过 程 . 我 们 说 
{Xn} 是 关于 {73s} 的 一 个 著 , 如 果 对 于 n = 0, 1,…- 

(i) E{IXn|} < %, (1.1) 

(ii) E{Xnt1ilYo, ,Yn} = Xn. (1.2) 

把 (Yo,…, 你 ) 看 作 至 1 为止 的 信息 或 历史 通常 是 有 用 的 . 这 样 , 在 赌博 的 情况 
下 , 这 个 历史 所 包含 的 信息 可 能 要 比 仅 由 过 去 财富 序列 (Xo,… ,Xn) 所 提供 的 信息 
更 多 一 些 , 例如 赔 徒 不 赌 时 的 赌博 结果 . 实际 上 不 需要 限制 Yi 是 一 个 实 的 随机 变 
量 . 一 般 来 说 , 它 可 以 是 有 限 维 其 至 无 限 维 的 癌 量 . 当 特 殊 序列 {7Y%} 不 重要 或 比较 
显然 时 , 我 们 将 不 提 它 , 仅 说 “{Xn} 是 一 个 靳 ”. 
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历史 决定 入 mn 是 指 : Xn 是 Yo, Y1,.…, Yn, 的 函数 ， 项 Yo, Y1,.….,Y, 值 决定 入 mn 


Xn = E[Xn+1i|Yo, “， , Vn] 
由 条 件 期 望 的 性 质 


Elg(Yo,:…, Yn)|Yo,.…, Yn = g(Yo,:…:, Y,), (1.3) 


我 们 推 得 
ElXn|Yo, 3 yn 一 从 mm 


下 助 全 概率 公式 , 得 到 


ElXn+1] 一 E{E[Xn+il|Yo, 机 | 一 E[X,), 


再 由 归纳 法 知 对 所 有 的 n 有 ， 
E[Xn] = ElXo]. 
若干 例子 
这 些 例子 表明 著 过 程 涉及 面 是 非常 广泛 的 . 我 们 先 从 一 些 重要 具体 情况 开始 ， 
然后 讨论 比较 一 般 的 情况 . 239 
(a) 独立 随机 变量 之 和 


设 Yo =0 和 六,Y2… 是 独立 随机 变量 序列 , 且 对 所 有 n, E[|Yn|] < oo EY] = 
0. 如 果 Xo =0 且 Xn = 了 十 … 十 Yr(n 之 1), 则 {Xn} 是 关于 {YY} 的 一 个 鞍 . 由 


EllXl] < EY + :++ ElYsl] < oo 


ElXn+i|Yo, 人 mn 一 ElX", 十 Yr+1i|Yo, “1 ,Yn 
= ElXn|Yo,.… ;Yn 十 ElYn rilYo,:…, Y] 
= Xn 十 五 yn+i (由 于 {%} 的 独立 性 ) 
= 从 n (由 于 玖 [zj = 0), 


我 们 验证 了 (1.1) 和 (1.2). 
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(b) 更 一 般 的 和 


假设 2Z; = gi(Yo,…,), 其 中 {Yi} 是 任意 随机 变量 序列 , {9;} 是 函数 序列 . 令 
f 是 满足 如 下 条 件 的 函数 


Ellf(Zx)|) < co， k=0,1,..: 

令 ak 是 上 个 实 变 量 的 有 界 函 数 . 则 
Xn 一 >_{f (2x) 和 Elf(Zx)|Yo, " Yr-1|}axr( Yo, "i Yi1) 
k=0 
定义 了 一 个 关于 { 读 } 的 款 . (这 里 约定 , 当天 三 0 时 五 [FL , 丈 -1] = Elf 
( 26)j.) 由 于 ak 是 有 界 的 , 可 设 对 于 所 有 的 加 ，…… ,了 -1 
[lak (Vo ,Yk-1)| < Ax. 

于 是 我 们 有 


E[[Xnl] < 2 AkElf(Z)N < oo 
k=0 


令 Bx = {f(2Zx) — Elf (Zi) Yo Ye-ij}ar(Yo,… ,Yi1). 则 利用 (1.3), 得 
ElBrlYo,::…, Yk-1) = 0. 


这 样 ， 
E[XnlYo, ,Yn 1 = EIXn -iYo,, Yn) + ELB,|Yo,:::, Yn-1) 
一 nl, 
由 此 证 明了 蔷 的 性 质 . 
(c) 和 的 方丈 


设 0 = 0 和 六,Y,… 是 独立 同 分 布 随 机 变量 , E[Yk] = 0 且 E[Y2] = o?,k = 


1,2,…. 今 Xo0=0 及 
1 2 
及 一 (DY:) — no*. 
k=1i 
于 是 ElIX,|| 和 2no2 < oo, 且 


ElXnri|Yo,.…:, Yn =E|( mnt Dn) — (n+ 1)o |Yo,- ,Yr| 


= ElY ta +t (Dn) — (n+ 1)o’|Yo,.…, Yl 
=] k=1 


nn 
= Xn + ElY21lY0,.., Yo) + 2B[YatilYo,., Ya] ( DY ) — 
k=1 
二 和 Xn. 
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这 样 ， {Xn} 是 一 个 关于 {Yn} 的 著 . 
(d) 马尔 可 夫 链 的 右 正则 序列 及 其 所 导出 的 拷 


有 一 个 常规 的 但 却 高 产 的 办 法 去 找到 与 马尔 可 夫 过 程 有 关 的 蒜 . 设 她, 矶 ，… 
表示 具有 转移 概率 矩阵 P =|| pij | 的 马尔 可 夫 链 : 令 f 是 关于 P 的 有 界 右 正 则 序 
列 , 即 f(i) 是 非 负 的 且 满 足 

HG = 》 Pij0)， (1.4) 
J 


( 见 第 2 卷 第 11 章 ). 取 X= f(Yn), 因为 f 有 界 , 则 E[|Xn|] < oo, 且 


ElXn+1|Yo, , Yn) 一 E|f (Yn+1)|Yo, , Yn] 
= Elf(Yn+1)|Yn] (由 马尔 可 夫 性 ) 
= 2_ Psf0) 


(由 于 E[f(Yin)|Y% = 让 = 2 Pf (7)) 
= f(Yn) (根据 (1.4)) 


24] 
许多 著 初 看 起 来 似乎 与 此 无 关 但 实际 上 却 以 这 种 方式 出 现 , 或 以 我 们 下 面 例 子 
更 一 般 的 形式 出 现 . 
(e) 由 转移 矩阵 特征 向 量 导出 的 鞭 
构成 鸭 的 最 广 证 方法 可 能 是 由 这 个 例子 所 氢 述 的 方法 ( 见 初等 问题 8, 15,18,， 
19, 21 和 23). 设 6b, Yi,… 是 马尔 可 夫 链 , 具有 转移 概率 矩阵 P =|| Pij ||. 向 量 f 
是 PP 的 右 特征 向 量 , 如 果 对 某 个 特征 值 和 以 及 所 有 的 i 有 


Af(i) = > P:;f(7), 


如 果 f 是 PP 的 右 特征 向 量 , 且 对 于 所 有 的 n, EIf( 闷 川 < co, 则 
Xn = 和 A"f(Y,) 
是 一 个 鞭 , 因为 
ElXn+tilYo,, = 五 AAA 
一 入 ”和 Ef(Yn+)|Yn) 
= An 1 》 Prof) =A"f(Y) 


一 Xn. 


242 
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更 一 般 地 , 假设 Yo, i,… 是 一 个 离散 时 间 马 尔 可 夫 过 程 , 其 转移 分 布 函数 是 
Fy|z) = Pr{Ynti < y|Yn = z}. (1.5) 
如 果 对 于 所 有 的 mw， 
El|lf(Yn))] < O00, 
且 对 于 所 有 的 y 
MW) = | f(aF(aly), 

则 Xn 一 A~"f(Y,) 是 一 个 蔷 . 

后 面 的 例子 足够 说 明 这 个 构成 装 的 方法 的 广泛 性 . 

(f) 分 支 过 程 

设 {Y%} 是 一 分 支 过 程 (2.2 节 例 F) 并 假设 后 代 分 布 的 均值 m < oo, 则 X = 
2 是 一 个 著 . 为 了 证 实 此 结论 , 我 们 用 2"(7) 表示 第 n 代 中 由 第 j 个 母体 产 


生 的 后 代数 目 . 则 
Ynti1 = 2°(1) + + 2 (Yn), 


ElYsnilYh] = YBEIZ™ (1)] = mY,,, 
所 以 m 是 函数 f(y) = y 的 特征 值 . 由 此 推 得 Xn = m-"Y 是 一 个 鞠 . 


(g) Wald 拷 


令 jo = 0 并 设 名,Y,… 是 独 江 同 分 布 随 机 变量 , 旦 对 某 个 入 关 0, 其 矩 母 函 
数 p( 和 ) = Blexp{ 和 Yx 站 有限. 那么 , Xo = 1 和 Xn = 9( 和 )~"exp{ 和 (六 十 … 十 辣 )} 确 
定 了 一 个 关于 {Yn} 的 鞠 , 因为 函数 f(y) = ey 是 部 分 和 5% = 六 十 … 十 Ys 马尔 可 
夫 过 程 的 一 个 特征 函数 , 其 相应 的 特征 值 是 4(A). 事实 上 , 和 (1.5) 一 致 , 在 这 种 情 
况 下 转移 分 布 函数 是 


Pi{Snti < ylSn = 2} = Gly —z). 


这 里 G 是 丈 的 公共 分 布 函数 . 
现在 我 们 来 计算 E[f(S%+1)1Sn = z], 利用 变量 替换 , 得 


fea,cl ~ 1) = ea | ace 一 ez 内 (入 ). 


这 个 恒等式 显然 证 实 了 前 面 的 结论 . 
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作为 实例 , 假设 ,YY,… 是 独立 的 正 态 分 布 , 其 均值 为 0, 方差 为 o*, 则 


p(X) = Elexp{ 和 A 和 Y1}} = exp (5%07} 


XK, = exp {XC 十 … 十 如) 一 X02}. 


选取 入 = jp/o”, 其 中 4 是 一 个 任意 常数 , 我 们 得 到 


Xn =exp {三 (7 十 … 十 外) 一 Rb . 
这 个 对 还 将 在 例 j) 中 出 现 . 
(h) 特征 向 量 方法 的 推广 


设 Yo, 了,… 是 任 一 随机 变量 序列 , 却 具 有 有 限 的 一 阶 绝对 均值 EllYhy < oo. 
假设 ， 对 风 一 0, 1, 2 


El[Yn+1|Yo, ee Yn = Qn 十 bn， bn 产 0. (1.6) 243 


今 ln+1(2) 是 线性 函数 ln+1(Z) 一 Cn 十 pm 2， 七 的 道 是 lr1(Y) 一 (y an ) /bn 并 且 令 
Ln(y) = 二 (全 ( (于 !)…). 则 对 于 任意 常数 六 Xn = kLn(Y%) 是 一 个 鞭 , 因 
为 
TBIXntilYo, ,Yo] = BlLnti(Yot) Yo 7 
一 了 ni 五 [Yiyo， "“*")， Y,|} 


(因为 Zn+i 是 它 的 目 变 量 的 线性 函数 ) 


= Lnti(ln+1(Yn))， (由 式 (1.6)) 
= Ln(Yn) = Tin 


具体 地 , 设 Yo 是 [0,1] 上 均匀 分 布 , 者 已 知 Yn, yn+l 是 在 fx 了 上 均 司 分布 ， 则 
Xn 二 2"[1 一 了 | 是 一 个 责 , 我 们 直接 检验 如 下 : 


E[Xn+ilYo, 机 了 | 一 2"+ 一 E[Ynri|Y,)] 
l 
— on+i 0 
2 1 5(l 十 全 ] 
= 2n(1 YY,) = 和 


216 第 6 章 糯 


(i) 刍 模 型 


这 是 (h) 的 另外 一 个 例子 . 这 个 模型 已 应 用 于 增长 过 程 的 研究 . 

考虑 一 个 纺 , 在 第 0 步 包 含 一 个 红 球 和 一 个 绿 球 . 随机 地 从 饶 中 抽出 一 个 球 , 然 
后 把 它 和 另外 一 个 相同 颜色 的 球 又 一 并 放 回 铅 中 . 这 个 试验 步骤 无 限 次 重复 进行 . 
令 Xn 是 第 n 步 红 球 所 占 比 例 , 于 是 = (n+ 2)Xn 是 红 球 的 数目 . 那么 , {Xn} 是 
一 个 关于 {Yr} 的 著 , 看 已 知 7 = 上 , 我 们 有 


y | k 十 1， ”以 概率 k/(n 十 2)， 
ntl 一 


k， 以 概率 1 一 k/(n 十 2). 
因此 
ElYn+ilYn 一 = 人 = k(n + 3)/(n + 2). 
即 


E [Ynti [Yn 一 bn, Yn, 。 


其 中 bn = (n 十 3)/(n 十 2). 然后 ， 利用 (h) 中 的 记号 ， ln (Zz) 一 bn_1z, L(y) 一 y /bn-1, 
以 及 


y 
L(y) bob! ，,， bn_i 
加 2 5 n+l1 
3° 4 n+2 
2 
n+av 
于 是 | 
Xn = ~Ln (Yn) re 
是 一 个 蒜 . 
0j) 似 然 比 


设 ,了 六,… 是 独立 同 分 布 随 机 变量 , 并 令 fo 和 所 是 概率 密度 函数 . 在 统计 假 
设 检验 理论 中 一 个 很 重要 的 随机 过 程 是 似 然 比 序列 


_ foO)F (FD) fi(Yn) 
~ fo(Yo)fo(Y1):…: fo(Yn): 


n= 0,1,..., 


Yn 
E[Xn+ilYo,.…:, Yn] = EX ,Aon |Yo,- | 


Alety] 


XnB [Rt Yn+1) 


1 
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当 Yi 的 共同 分 布 具有 概率 密度 函数 fo 时 , {Xn} 是 一 个 关于 {Yn} 的 园 . 为 了 证 实 
这 一 点, 我 们 仅 需 要 验证 


[AGRO 


2 元 = / (2 Hol(y)ay = / fiW)dy=1, 
此 即 所 要 证 明 的 . 5 


作为 一 个 例子 , 假设 fo 是 正 态 密度 函数 , 均值 为 0, 方差 为 o2, 而 fi 是 均值 为 
4 和 方差 为 c? 的 正 态 函 数 , 则 


ho) 2uy — n° 
foy) { 20? } 
并 且 


2 
1 np 
Xn =exp {三 ( 十 十,) 一 5 上 


这 个 车 早已 出 现在 例 (g) 中 . 
由 似 然 比 构 人 进出 来 的 著 在 研究 假设 检验 序 贯 过 程 的 性 质 中 有 很 多 的 应 用 . 
(k) Doob 默 


设 Yo, 半 ,… 是 任意 一 个 随机 变量 序列 , 且 X 是 满足 E[|X1] < oo 的 随机 变量 ， 
则 


X = EIX|Y,...,Y,) 
构成 一 个 关于 {Yn} 的 拷 , 称 为 Doob 过 程 . 首先 


EllXnl] = E{lELXIYo,::,Y.)|} 
< E{EINX||Yo,.…, Yr)} = EIIX|] < oo. 


其 次 , 由 条 件 期 望 的 全 概率 公式 "有 


ElX",r1ilY, , Yn 一 E{E|IX|Y,o, 加 yn+lilyo， , Yn} 
= E[X|Yo,..., Yn,] = X,. 


1. 这 里 将 通常 的 条 件 期 望 的 全 概率 公式 推广 为 公式 E[X12] = BE{E[XIY, 2]12}, 其 中 乔 机 变量 六 满 
足 条 件 忆 [|Xl < co. 读者 可 补充 其 证 明 . 
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(1) 拉 东 - 尼古丁 导数 . 
假设 2 是 在 [0,1) 上 均匀 分 布 的 随机 变量 , 定义 一 个 新 的 随机 变量 及 : 
Yn = k/2™, 


其 中 (取决 于 n 和 2Z) 满足 


请 注意 , 当 n 增加 时 Y。 如 何不 断 提供 更 多 的 关于 2 的 信息 . 事实 上 , Y, < 2 < 
+ (3) ,从 而 次 确定 了 2 的 有 尽 二 进位 分 解 中 的 前 n 位 数字 
令 f 是 [0,1] 上 有 界 函数 , 构 选 差 商 


Xn =2° {fF +2 7")— fF(Yn)}. 


我 们 断定 {Xn} 是 一 个 关于 {Ys} 的 蒜 . 首先 注意 到 , 在 条 件 Yo,…,Y… 下 ,2Z 在 
[Yn, Yn 十 27"] 上 均匀 分 布 , 于 是 Yi41 等 可 能 地 为 到 或 殉 十 2-42+0, 故 


ElXn+ilYo, 7 , Yn) 一 22+ Ef (Yn 十 2—(n+1)) f (Yn+1)|Yo, "*'*) | 
= 2°+ {51f (Ys + 2700+D) ~ f(Yo)] + SCY + 27") — f(Ys + 2-(n+))]) 
=2"°{ f(s + 27") ~ fF(Y)} = Xn 


注意 到 

x 2 f+ 2") - f(Ys) 

nn 一 ID—n 

近似 地 是 f 在 2 的 导数 . 事实 上 , 在 十 分 一 般 的 条 件 下 , 可 以 证 明 序列 {Xn} 以 概 
率 1 收敛 于 某 个 随机 变量 入 ec 一 Xco( ODN 并 且 大 n 一 ElXw|Yo,: ,nj|( 见 6.7 节 
末 ), 随机 变量 Xoo(2) 称 为 了 在 2 的 拉 东 - 尼古丁 导数 . 这 样 , 鞍 的 性 质 与 函数 的 
微分 理论 甚至 与 数学 分 析 许 多 其 他 方面 都 有 着 密切 联系 . 


结果 提要 


下 一 节 将 处 理 比 较 一 般 的 情况 , 在 那里 拷 的 等 式 将 被 不 等 式 所 代替 . 然后 我 们 
介绍 拷 理 论 两 个 主要 结果 , 可 选 抽样 定理 和 鞍 收 伊 定理 , 以 及 这 些 定理 的 诸多 应 用 . 
可 选 抽样 定理 告诉 我 们 , 在 十 分 一 般 的 情况 下 , 只 要 Xn 是 一 个 拷 , 则 Xz, = Zn 
也 构成 一 个 蒜 , 其 中 {Tn] 是 随机 选择 时 间 和 集合 , 它们 构成 一 个 “马尔 可 夫 时 间 ” 的 
递增 序列 . 一 个 马尔 可 夫 时 间 工具 有 如 下 性 质 : 事件 {T= nn} 仅仅 由 直至 ”为 止 的 
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历史 (Yo, 妇 ,… ,Yn) 所 确定 . 可 选 抽样 (或 停止 ) 定理 在 序 贯 决策 问题 中 , 在 推导 某 
些 不 等 式 以 及 在 计算 与 某 些 随机 过 程 有 关 的 各 种 事件 的 概率 中 都 有 着 很 多 的 应 用 . 

著 的 收敛 定理 给 出 当 n 一 co 时 使 得 蔷 X 收敛 于 极限 随机 变量 Xo 的 一 般 条 
件 . 这 些 定理 在 分 析 过 程 的 轨道 构造 以 及 确定 多 种 类 型 随机 过 程 的 各 种 函数 的 渐 
近 分 布 时 具有 重要 意义 . 


6.2 ”上 园 和 下 逻 


为 了 多 种 目的 , 需要 一 个 由 不 等 式 建立 的 更 一 般 的 概念 . 

定义 2.1 设 {Xn,n = 0,1,…} 和 {Yn,n = 0,1,…} 是 随机 过 程 . {X} 称 为 
一 个 关于 {h} 的 上 蒜 , 如 果 对 任意 m 

(i) E[X~] > -00, 其 中 x = min{z,0}, 

(i) E[Xn+i|Yo,:::, Yn] & Xn, (2.1) 

(ii Xn 是 (70,… ,六 ) 的 一 数 . 

我 们 称 {Xn} 是 一 个 关于 {Yh} 的 下 款 , 如 果 对 任意 nn 有 ， 

(ij E[X7i] < oo, 其 中 , z” = max{0, zj 

Qi) E[Xn+1ilYo,:::, Yh] > Xn, (2.2) 

(i) Xn 是 (0,… ,六 ) 的 函数 . 
正如 堵 的 情况 那样 , 我 们 经 常 省 略 {7%}, 假如 它 不 太 重 要 或 从 上 下 文 来 看 是 显然 的 . 

上 述 定 义 中 的 第 三 个 条 件 指 出 了 X 由 到 时 刻 ”为 止 的 历史 所 确定 , 或 等 价 
地 , 至 n 为 止 的 可 得 到 的 信息 能 够 确定 X 的 值 . 前 面 已 指出 , 对 于 著 而 言 , 如 此 确 
定 方 式 日 动 满足 , 因为 Xn 作为 {}?o 的 函数 有 等 式 


X, = E[Xn i)Yo, ,Yal. (2.3) 


而 对 上 、 下 缺 而 言 , 堵 的 等 号 被 不 等 号 所 代替 , 因此 , X" 能 被 (Yo, 了,… ,Yn) 所 确 
定 这 个 必要 条 件 应 当 明 确 地 加 上 . 我 们 有 时 通过 下 面 函 数 的 表达 式 来 表示 这 个 函数 
人 An = Xn(Yo, ,Yn). 

注意 , {Xn} 是 一 个 关于 {YY} 的 上 坝 当 且 仅 当 { 一式"} 是 下 蒜 . 类 似 地 , { XX，} 
是 一 个 关于 {Yn} 的 著 当 且 仅 当 {Xn} 既是 下 蒜 又 是 上 款 . 因此 , 关于 上 蔷 的 命题 
能 被 改 为 关于 蔷 和 下 坦 的 相应 命题 . 为 了 避免 重复 书写 , 我 们 通常 仅 给 出 三 种 情况 
中 的 一 种 情况 的 证 明 . 

例 设 {Yn} 是 马尔 可 夫 链 , 具有 转移 概率 矩阵 P=|| Bj ||. 如 果 了 是 书 的 右 
上 正则 序列 ( 即 对 任意 i 满足 》` Pj;f(j) < f(i) 的 非 负 序列 ), 则 X= f(Yi) 定义 


J 
了 一 个 关于 {Yh} 的 上 团 . 这 个 论断 的 证 明 可 仿照 6.1 节 例 (d) 进行 . 


247 


248 


249 
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当然 , 在 下 载 和 右 下 正则 序列 ( 即 对 任意 1 满足 f(i) < S、PJ() 的 非 负 序列 ) 


7 
之 间 存 在 类 似 的 关系 , 倘若 我 们 假设 E[f (Yi)] < oo. 
Jensen 不 等 式 ” 称 定义 在 区 间 工 的 函数 $ 是 凸 函 数 , 如 果 对 任意 zzz E7 


和 0<aw<1 有 
ab(z1) + (1 — a)$(z2) > bari + (1 — a)z2). (2.4) 
由 (2.4) 开始 直接 使 用 归纳 法 得 
六 se 2d( 人 ae) 5 


对 所 有 TI, TX ,Tm E 了 和 Ci >0,> ar = 1] 成 了 汇 . 如 果 9 是 二 次 可 微 的 ， 则 由 是 
4 一 了 


2 
凸 的 当 且 仅 当 对 所 有 z, 5-5 > 0. 这 样 , 凸 性 通常 很 容易 验证 . 如 果 X 是 随机 变量 
它 分 别 以 概率 ai(i = 1,2,.…,m) 取 值 zi, 则 方程 (2.5) 能 简写 为 


Elo(X)] > $(E[X)). (2.6) 


Jensen 不 等 式 指 出 , 当 $ 是 (-ce,+eo) 上 的 凸 函数 时 ,，(2.6) 对 所 有 的 实 随 机 变量 
X 都 成 立 . 不等式 (2.6) 可 视 为 (2.5) 的 连续 积分 形式 . 相同 的 结论 对 条 件 期 望 也 成 
并 . 如 果 $ 是 凸 的 , 我 们 有 


Elp(X)|Yo,.:., Yn) > bE[X|Yo,.::, Yn)). (2.7) 


由 上 述 事 实 我 们 可 以 用 著 来 构造 下 辕 . 

5| 理 2.1 设 {Xn} 是 一 个 关于 {1Y%} 的 靳 . 如 果 9 是 一 个 廿 函数 , 且 对 任意 
n,EIo(Xn)"] < oo ， 则 {9(Xn)} 是 一 个 关于 {Yh} 的 下 坝 . 特别 地 , {Xn|} 通常 是 
一 个 下 靳 . 倘若 对 任意 有 五 [Xa] < oo, 则 {X2} 是 一 个 下 鞍 . 

证 明 ”我 们 只 需 证 明 下 巩 不 等 式 , 其 他 性 质 是 比较 容易 证 明 的 . 利用 Jensen 不 
等 式 , 我 们 有 


五 [的 ni yo， ,了 之 bE[Xn+1ilYo, “* , Yn |) 
= (Xn). 


下 面 是 类 似 结 果 , 证 明 从 略 . 
引 理 2.2 ” 设 {Xn} 是 一 个 关于 {Yn} 的 下 著 . 如 果 少 是 目的 增 函 数 ,那么 
g$(Xn) 是 一 个 下 载 , 倘 行 E[$(Xn)+] < oo. 


6.2 上 娄 和 于 糯 ”221 


(注意 , 对 {Xn} 的 要 求 条 件 比 较 弱 , 仅仅 是 下 观 , 但 对 y 的 要 求 比较 高 , 9 是 增 
的 凸 函 数 .) 
由 此 , 如 采 {Xnj 是 下 靳 , 且 


XX 一 | 入 mn， 荷 Xn > 一 C， 


(2.8) 
一 C， 若 忒 ， 所 一 C， 


其 中 c 是 固定 的 , 则 {XY,} 是 下 蒜 , 是 对 任意 n, EI|Xh|] < oo. 特别 地 , 当 {Xn} 是 下 
鞭 时 , {X+} 也 是 下 黄 . 


初等 性 质 


我 们 在 一 个 命题 中 包含 上 甘 和 拷 的 结果 , 关于 上 团 的 假设 和 结论 写 在 括号 里 . 
(把 {Xn} 改 为 {一 Xn}, 可 以 导出 关于 下 擂 的 相应 结 时 .) 
(a) 如 有 果 {Xn} 是 一 个 关于 {Yn} 的 (上 ) 园 , 则 对 每 个 有 > 0 成立 


ElXn+xrlYo, ,Ynl(s) = Xn. (2.9) 


证 明 我们 应 用 归纳 法 . 由 定义 , (2.9) 对 于 上 = 1 是 正确 的 . 假设 (2.9) 对 于 
正确 , 则 


ElXn+k+1| Yo, 加 yn | 一 E{E[Xn+r+ilYo, “"')， Yn， “) Yn+kj|Yo, "9 yn 上 
(<) = E{Xn+k1|Yo,.*:, Yn} 
(<) = Xn. 


(b) 如 采 {Xn} 十 (上 ) 款 , 则 对 0<k<n 
ElXnl(<) = ElXk}(<) = ElXol. (2.10) 
证 明 利用 (2.9), 我 们 对 式 
E[Xn|Yo,:., Ys](<) = Xk 


取 期 望 , 得 
El[Xn| = E{E[Xn|Yo,::., Ye]}(<) = 五 [ 和 时 
同 理 可 证 EI[Xxl(<) = E[Xol. 者 
(c) 假设 [X%] 是 一 个 关于 {Yh} 的 (上 ) 款 并 且 9 是 Yo,…, ,的 ( 非 负 ) 函数 
倘 知 其 期 望 存 在 , 则 


Elg(Yo,:…, Yn)XntrlYo,, Yn](g) = g(Yo,…, Yn) Xn. (2.11) 
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证 明 由 于 g(Yo, ”1 Y,) 是 由 (Yo, “3 Y,) 决定 的 ， 利用 条 件 期 望 的 基本 性 质 ， 
我 们 有 


Elg(Yo, “ Yn )Xn+k|Yo, , Yn| 一 g(Yo, 四 , Yn) EIXn+k|Yo, “ Yn 


(<) 一 g( Yo, 加 Yn)Xn. 
(对 于 上 靳 情况 (<), 我 们 需要 g > 0.) 本 
序 贯 决 策 模型 


考虑 具有 有 限 数 9 个 状态 的 系统 , 状态 用 正 整 数 1,2,…,5 表示 . 我 们 定期 地 
( 辟 如 每 天 一 次 ) 观察 系统 的 现时 状态 , 然后 从 4 个 可 能 行动 1,2,…, 4 中 选择 一 
个 , 作为 现时 状态 s 和 所 选择 行动 a 的 联合 结果 , 下 面 两 个 事件 发 生 : (i) 我 们 得 
到 直接 收入 i(s,a); (ii 系统 转移 到 新 的 状态 , 转移 到 新 状态 s' 的 概率 由 已 知 函数 
q 二 q(s'js,Q) 确定 . 我 们 的 问题 是 确定 选择 行动 的 策略 使 得 至 N 个 周期 时 间 为 止 
总 的 平均 收入 最 大 . 

设 So0, Ao, S51,…, AN_2, Sn-_1, AN-1 是 状态 和 行动 的 交错 序列 . 一 个 策略 r 是 
一 组 函数 ro,…, XN-1, 其 中 mm 是 规定 行动 4, 作为 观察 到 的 历史 S50, ho,:… ,4n -1， 
Sn 的 郴 数 , 即 , 如 果 策 略 x 被 采用 , 则 


An 一 nn(So, 40， ; An-1) dn). 


在 策略 r 之 下 , 作为 初始 状态 So = s 函数 的 平均 收入 为 
N-1 


2》_ i(Sk, Ax) 


k=0 


I(7,s)=E 


我 们 希望 选择 r 使 得 T(x, s) 最 大 . 
用 问 后 递 推 的 方法 定义 函数 f0,…, fn. 令 


fn(s)=0, 对 所 有 s， (2.12) 


并 对 n= 1,2,.….,N， 
fn-i1(s) = max {ils, a) 十 >, fn(s')q(s'|s, o) (2.13) 
则 依据 6.1 节 例 (b) 


Xn 一 >》{ kr(Sk) 一 E|fr(Srx)|So, Ao, “"", Sk-1, Ax-1|} 
k=1 
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关于 {Y.,} 一 {(Sn,, A )} 构成 一 个 靳 . 显然 ， 
E[Xn| = 0. (2.14) 
由 (2.13) > 
fn-1(s) > i(s, 0) 十 2 fn(®) (s'|s,a), 对 所 有 的 s 和 a, 所 以 , 特别 地 ， 
fk—1(Sk-1) iI-1, Ak— ) + 2 frls )g(s |Sk-i, Ak-1) 


=i(Sk-1, Ak— ,) + EIfi(Se)So, Ao,.. ,Sx_1, Ak-1)], 


(2.15) 


不 管 采用 什么 策略 上 式 均 成 立 . 代入 (2.14) 得 到 


0 = E[XN]= 


N 
E| > {fr(Sk) — E[lfr(Sk)|So, Ao,..:, Sp-1, 4 可 


k=1 


N 
之 B| Dhls) + i(Sk-1, Ak-1)— fa-1(Se-1)} 


fet 


N— 
一 E| 2 (Ok, Ak) 十 fn(SN) 一 fo(So)| : 


印 
N-1 


Elfo(So0)] > B| >》 计 LSk， 4h)|. 252 


天 一 0 
如 果 So = s, 则 对 任何 策略 r 
fols) 之 1(7, s). 


这 就 是 说 没有 一 个 策略 能 够 使 得 平均 收入 超过 fo(s). 这 样 , 如 果 我 们 有 一 个 策略 
7* 满足 
fo(ls) 一 1(T ， 3)， 
则 这 个 策略 显然 是 最 优 的 , 对 每 个 s, 令 
Tmn_l(90, 40， 4 2,5) 


是 使 (2.13) 右边 部 分 取 到 最 大 值 的 行动 , 即 如 果 A%_) = 不 _1(S0, 人,… ,Sk-1,), 则 
(2.15) 化 为 等 式 


fr-1{(Sk-1) 二 1LSK 1， 4K_1) 十 Flfr(Sy)|So, 40， ”0 y Sk—1) Ar_1]. 
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如 前 述 同 样 论证 , 我 们 进一步 得 到 等 式 


-1 
Elfo(So) -Be 2 i(Sk, Ak) | 
二 
或 
fo(s) = I(7”,s). 


这 样 的 r*, 即 在 第 n 一 1 步 处 于 状态 5。_1 = s 之 下 选择 行动 使 得 (2.13) 的 右边 部 
分 达到 最 大 的 策略 是 最 优 的 . 


6.3 可 选 抽样 定理 


考虑 一 个 公平 赌博 , 第 一 级 赌博 以 相 问 概率 启 取 或 输 掉 一 元 钱 令 阅 ,7Y2,… 是 
独立 同 分 布 随机 变量 , 上 且 Pr{Yi = +1} = Pr{Yk = 一 1} = = > 设 Xn 一 下 十 … 十 区 
是 赌博 某 一 方 至 第 ” 步 净 营利 . 显然 E[X] = 0， 即 兆 营 利 的 平均 值 为 0. 但 赌博 者 
不 需要 一 直 赌 下 去 , 也 不 需要 预先 指定 一 个 特定 时 间 停 止 . 他 可 以 按照 赌博 进展 的 
情况 来 确定 何 时 停止 赌博 . 例如 他 可 以 在 赢 钱 时 停止 赌博 . 

设 了 是 赌博 者 停止 赌博 的 时 间 , Xz 是 当时 的 净 营 利 . 我 们 已 经 知道 对 任意 m 
有 E[Xn] = 0. 是 否 也 一 定 有 EL[X7z] = 0? 赌博 者 是 否 能 够 在 赢 时 停止 ? 回答 是 肯 
定 的 , 但 有 一 些 限制 条 件 . 

首先 , 由 于 我 们 不 是 先知 先觉 , 我 们 要 来 选择 停止 的 时 间 仅 仅 取决 于 迄今 为 止 
所 观测 到 的 信息 . 即 , 我 们 要 求 赌 博 者 停止 在 第 nn 步 这 个 事件 仅仅 取决 于 1,:…… ,YY 
随机 变量 了 若 对 每 一 个 n 满足 这 个 要 求 便 称 为 马尔 可 夫 时 间 , 有 时 也 称 为 停 时 , 或 
不 依赖 于 将 来 的 随机 变量 (关于 {Y%}). 随后 , 我 们 将 给 出 它 的 清晰 定义 . 

即使 在 这 个 限制 之 下 , 我 们 能 够 使 EIX7T] > 0! 例如 人 = min{n : Xn = 1} 是 马 
尔 可 夫 时 间 , 因为 {T= n} 当 上 且 仅 当 克 二 十 丈 <1 (kh<n) 和 十:… 十 总 =1. 
由 于 随机 游 动 {Xn} 是 常 返 的 ,了 < oo, 并 且 X7 三 1, 所 以 , E[X7r]=1>0. 

本 市 的 目的 是 更 进一步 地 讨论 这 个 问题 ， 我 们 将 说 明 上 述 定义 的 马尔 可 夫 时 
间 了 具有 某 些 局 限 性 , 并 且 在 实际 中 不 一 定 可 实现 . 例如 , 在 上 例 中 当 工 的 均值 为 
无 限时 , 在 停止 之 前 按 平均 有 无 限 多 的 财富 将 失去 , 所 以 赌博 者 要 成 功 地 采用 这 个 
策略 必须 有 无 限 多 财富 . 

男 一 方面 , 在 十 分 一 般 的 条 件 下 , 当 了 了 是 具有 有 限期 望 的 马尔 可 夫 时 间 时 , 对 
于 一 个 蒜 成 立 EI[XT] = EIXol, 这 个 结果 有 广泛 的 应 用 , 其 意义 远 远 超出 了 赌博 的 
范围 . 


6.3 可 选 柚 样 定理 225 


马尔 可 夫 时 间 


马尔 可 夫 时 间 出 现在 很 多 地 方 . 这 里 有 一 个 应 用 于 马尔 可 夫 链 的 例子 . 假设 i 
是 马尔 可 夫 链 {zn} 的 常 退 状态 . 我 们 要 证 明 


Pr{Y 回 到 i 至 少 两 次 } = 1. 
既然 是 常 返 的 , 我 们 知道 
Pr{ 浆 回 到 和 至 少 一 次 } = Pr{Ti < co} = 1. 
其 中 五 = min{n > 1 :了 5= 针 是 第 一 次 回 到 ;的 时 间 , 利用 马尔 可 夫 性 , 有 


Pr{ 回 到 i 至 少 两 次 } 
二 Pr{Zi < oo}Pr{ 在 到 之 后 回 到 ?7 < oo0} 
= Pr{T; < oo0}Pr{T; < ool2 = 0 
= 二]xl1=1. 


这 里 有 些 问题 需要 进一步 讨论 . 如 , 在 五 之 后 回 到 i 的 概率 为 什么 和 任何 时 刻 回 到 
i 的 概率 相同 ? 下 面 给 出 的 更 详细 的 证 明 将 说 明 何 处 利用 了 马尔 可 夫 性 以 及 随机 时 
则 T 的 什么 性 质 使 得 上 述 成 为 可 能 . 我 们 注意 到 254 


Pr{ 在 之 后 回 到 i|7; = 他 
= Pr{Yx+n = i 对 某 些 n=1,2,.…|Y ,j= 1,2,…,k 一 1; = 个 
= Pr{Yx+n = i 对 某 些 n = 1,2,…| 迁 = 和 (由 马尔 可 夫 性 ) 
= Pr{Yn = 1 对 某 些 n= 1,2,…|Yo = 让 (利用 平稳 转移 概率 的 性 质 ) 
= Pr{T; < o0|Yo = =1. 


这 样 ， 
Pr{Ti < oo 且 在 工 之 后 回 到 分 


= 》,Pr{ 在 工 之 后 回 到 il; = 有}Pr{T; = } 


k=1 


站 


1 x Pr{ = k} = | 


| 


i 
这 里 的 关键 是 事件 { = 有} 与 事件 {六 关 i 对 于 7 了 = 1,2,…,k 一 1;Yx = 人 条 相同， 
并 且 仅 依赖 于 (Yo,… ,六 .). 

定义 3.1 ”随机 变量 了 称 为 是 一 个 关于 {Yh} 的 马尔 可 夫 时 间 , 如 果 了 取 值 
于 {0,1,.…,00}, 并 且 对 于 每 个 n = 0,1,…, 事件 {T= n} 由 (Yo,…, 总 ) 确定 . 
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“确定 ” 意 指 全 = nn} 的 示 性 函数 可 视 为 Yo,…, Yn 的 函数 , 即 , 我 们 能 够 由 过 程 
Yo, 妆 ,… ,Yn 至 为止 取 值 的 情况 确定 究竟 =n 或 TT 关 n. 用 式 子 将 二 述 写 为 


[T=n} 一 TT=n} (Yo, 四 Yn) 


1 在 了 工 =m 
0 著 了 头 m. 


我 们 通常 省 去 {Y;}, 仅仅 说 人 是 马尔 可 夫 时 间 ”. 如 果 了 是 一 个 马尔 可 夫 时 间 , 则 
对 于 每 个 mw 事件 位 系 人 人 人 > 人 人 位 站 和 全 <m 也 被 (mm 于 ) 所 确定 . 
事实 上 , 我 们 有 
Hzrsn = 》 Tr=k} (Yo,. ,7%) 
大 一 
Tr>n} 一 1 一 Tren} (Yo, “ ; Yn), 
等 等 
反之 , 如 果 对 每 个 n, 事件 { 荆 < nn} 由 (160,… ,了 ) 所 确定 , 则 了 是 一 个 马尔 可 
夫 时 间 . 或 者 ， 符 对 每 个 2, 事件 {T 之 n} 由 (Yo, ,Yn) 所 确定 ， 则 I 也 是 一 个 马 
尔 可 夫 时 间 . ( 见 问题 20) 
如 果 {Xn} 是 一 个 关于 {Y%} 的 蔷 , 则 对 于 每 个 mn Xn 由 (76,…, 总 ,) 确定 . 由 
此 推 得 每 个 关于 {Xn} 的 马尔 可 夫 时 间 同 样 也 是 一 个 关于 {Yn} 的 马尔 可 夫 时 间 . 
当然 , 同样 命题 对 于 上 团 和 下 堵 也 是 成 立 的 . 
马尔 可 夫 时 间 的 一 些 例 子 
(a) 固定 时 间 ( 即 和 常数 ) 了 三 到 是 马尔 可 夫 时 间 . 对 所 有 Yo, 页，……, 我 们 有 


0， 如 果 你 尖 天 ， 
1 ， 如 果 交 一 天. 


(b) 过 程 Ww, 六 ,… 首 达 状态 空间 子 集 4 的 时 间 也 是 马尔 可 夫 时 间 , 即 对 


T(A) = minfn : Y, € A}, 


[T=n} (Yo, ” , Yn ) 一 | 


我 们 有 


如 果 Y; 4 4h,j=0,:…,n 一 1,YnE€Ah. 
其 他 . 


(c) 更 一 般 地 , 对 任何 固定 上, 过程 第 上 次 到 达 集 合 4 的 时 间 也 是 一 个 马尔 可 
夫 时 间 . 然而 , 一 个 过 程 到 达 一 个 集合 的 最 后 时 间 不 是 马尔 可 夫 时 间 . 这 是 由 于 , 要 
确定 某 个 特定 的 到 达 时 间 是 否 是 最 后 时 刻 , 我 们 必须 知道 整个 将 来 情况 . 


1， 
TTA=n}{Yo,.…, Yn} = | 0 
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初等 性 质 
(a) 如 果 3 和 了 是 马尔 可 夫 时 间 , 则 3 + 了 也 是 马尔 可 夫 时 间 . 我 们 有 


1 
Ist+7=n} = 2 Hs=i HT=n-h)- 
k=0 


(b) 两 个 马尔 可 夫 时 间 中 的 较 小 者 , 表示 为 
SAT = min{S,T)}, 
也 是 马尔 可 夫 时 间 . 这 是 因为 
TsaT>n} = {{s>n}{{T>n}. 


是 . 
(co 如 果 S 和 工 是 马尔 可 夫 时 间 , 其 较 大 者 5VT = max{5S,7T} 也 是 . 因为 


TsvTgn} = Hssgn}l{Tgn}. 256 
可 选 抽样 定理 : 
假设 {Xn} 是 一 个 蒜 , 工 是 一 个 关于 {Yh} 的 马尔 可 夫 时 间 . 我 们 随后 将 证 明 
E[Xo] = E[XrAn] = lim ElXTAn]. 
如 果 了 < co, 则 lim XrAn = X7; 实际 上 , 当 n > 了 了 时, Xzrnn = XT. 这 样 , 要 是 我 
们 证 明了 当 n 一 00 时 极限 与 期 望 可 交换 , 我 们 就 能 导出 下 面 重要 的 恒等式 
EIXo] = lim ElXrAn] = Bl lim Xznn] = E[X7|. (3.1) 


后 面 我 们 要 给 出 几 个 条 件 使 得 这 个 交换 是 合理 的 . 
5| 理 3.1 设 {Xn} 是 (上 ) 拷 , 了 T 是 关于 {Yh} 的 马尔 可 夫 时 间 ， 则 对 任意 


nn 之 
ElXnTT=k} (<) = ELXrTr=r)}]: (3.2) 
证 明 ”由 全 概率 公式 和 (2.9) 得 
BIXn 07ml= E(BLX, Lr (00, Yl, 
z = E{lr-r} EI[Xn|Yo,.::, Yx]} 
(<) = E{lr=k} Xk}. 园 
1. 也 称 为 可 选 停止 定理 . 


i 
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引 理 3.2 ”如 果 {Xn} 是 (上 ) 蒜 , 了 是 马尔 可 夫 时 间 , 则 对 任意 n = 1,2,…， 
ElXol(2) = El[XTAnl(2) 三 五 [全 可 (3.3) 


证 明 ”利用 引 理 3.1， 
n—l 


ElXran]= 2》_ EI[XTlr=n] + ELXn lryn}] 
k=0 
-1 


= 2 E[Xel(r=k}] + ELXn Trzn}]lST =k 时 Xr = Xk 
k=0 


和 一 | 


(>) = 》 BE[XnTr-k)] + BIXn1T>n}] 眼 据 (3.2)] 
kk 二 0 
= E[X,). 


对 于 默 ， 鳌 [Xn] = BIXo], 在 此 情况 下 已 证 得 结论 ， 对 于 上 轩 情 况 ， 我 们 证 明了 
IXTAn|] > [Xn]， 尚 须 证 明 五 [Xol > E[XTAn]， 我 们 不 妨 假设 对 于 所 有 n 有 
EX4|| < %. 一 般 情况 可 由 引 理 2.2 后 面 的 注 所 提示 的 截断 法 推 得 . 

如 下 定义 的 序列 


Ef 
Xn = >_ {Xp — ELXk|Yo,:., Ye-1)} 


上 一 | 
是 一 个 鞭 (Xo = 0) 戎 考 6.1 节 例 (b)]. 这 样 


0 = E[Xrnnl 


TAn 

= E| DO {Xe — ELXelYo,…., Ye])}| 
k=1 
TAn 


> E|D {Xx — Xe-1}| = ELXrAn] ~ ElXol, 
k=1 


因此 ， 
ElXol 之 E|XTnn), 
这 就 完成 了 证 明 . | 


现在 我 们 验证 式 (3.1) 中 极限 号 与 期 望 可 交换 . 保证 这 个 交换 的 可 行 的 最 一 般 
条 件 是 随机 变量 序列 {XrwAnj 的 一 致 可 积 性 , 其 意义 是 


lim sup E[[XTnn|| =0, 
QU—+O0O ni 之 0 
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其 中 
和 0, 如 果 |XTAn| <Q, 
TAn 
XTAn， 如 果 |X7An| 之 a， 


目 了 < oo. 下面 我 们 所 考虑 的 虽然 不 是 上 述 一 般 条 件 , 但 仍然 包含 了 许多 重要 的 情 
况 . 

5| 理 3.3 设 W 是 任意 随机 变量 , 满足 El|WI] < co, 并 令 了 是 马尔 可 夫 时 间 
满足 Pr{T < oo0} = 1. 则 有 


lm EI[WHr>n}] =0 (3.4) 
和 
im E[W ireny = 五 | 他 站 (3.5) 
证 明 ”我 们 把 这 个 问题 化 为 非 负 项 级 数 初等 收敛 性 的 问题 . 首先 
ElIW|] > EllWIHreny 
= >》 El|WI|T= 加 Pr{fT=k} ”( 全 概率 公式 ) 
k=0 
n= 0 》 EIWIT = Pr{T =#)} 
k=0 
= BlIWI. 
因此 
lm EllWIIreny] = BlIW)), 
并 且 
im EllWIHr>n} = 0. 
其 次 , 注意 到 
0 < |E[W] ~ E[W Hrgn}]| 
一 IE[WIrsnyll 
< EllWII(r>n}] 一 0, 图 
这 就 完成 了 证 明 . 


下 面 关 于 受 控 著 的 可 选 抽样 定理 直接 由 上 述 引 理 推 得 . 
定理 3.1 假设 {Xn} 是 拷 , 了 是 马尔 可 夫 时 间 . 如 果 Pr{T < oo}j = 1 和 
BE|sup|lXranl| < o0, 则 
之 0 
ElX7] = ElXol. 
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证 明 置 W = sup XTAnj. 由 于 Pr{T < 00} = 1, 有 下 面 分 解 式 


XT 一 2, Xrl{r=h 一 2 XTAMf7- 昌 | 
=0 =0 


从 而 推 知 |Xz| < W, 所 以 EIX7l] < EIW] < co, 即 Xz 的 期 望 存在 且 有 限 ， 我 们 
仅 需 要 证 明 lim_E[Xrnw] = EIXT]. 我 们 有 


|E[XTAn) E[X7|| < El| [CTAn 一 及 了 有 CT 


259 < 2ElWIr>n}). 
但 由 引 理 3.3, 有 lim_ BITtr>m] = 0. 参见 式 (3.3) 即 知 证 明 已 完成 四 
推论 3.1 假设 {Xn} 是 蒜 , 工 是 关于 {了} 的 马尔 可 夫 时 间 , 如 果 
(i) EIT} < %, 


且 存 在 一 个 常数 扩 < co, 使 得 对 于 n < 工 ， 
证 明 定义 Zo= |Xol 和 2 = [Xn — Xn_il,n = 1,2,..., 并 令 
W = L0 十 … 十 LAT， 
则 多 >1X7|, 且 
EIW]= >》 >》 BlZrlr=n)) 


n= 二 0 k=0 


一 >》, 3 E[ZxrT{r=n}] 


k=0 n= 
OO 

= 》 ElZrl(r>xk}]. 
k=0 


注意 到 TT>xk} = 1 一 Tgk-1) 仅 是 {2…… 丈 -的 函数 , 并 由 (让 , 着 上 < 工 则 成 
立 不 等 式 BE[2Zx|Yo,…, Yk-1] < K. 因此 ， 


OO OO 
>》 ElZkl{rT>k}] = 2, E{ElZrlr>r}lYo,.., Yr—1l} 
k=0 k=0 
OO 
= 》 E{IT>k} ElZxlYo,..:, Yi_1)} 


< KS》 Pr{T >k} 
k=0 


< K(l+EIT]) < oo. 
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这 样 , E[W] < oo. 由 W 的 定义 知 对 任意 nn 有 |XrAn| < W, 由 定理 3.1 即 得 结论 .本 

定理 3.2 (可 选 停 止 定理 ). 设 {Xn} 是 拷 并 且 了 是 马尔 可 夫 时 间 . 如 果 

(i) Pr{T < oo}+ = 1, 

(i E| |X7T| | < oo， 

(iii) Lim 五 [nr 三 0, 
则 五 Xz] = ElXol. 

证 明 我 们 强调 (过 是 必须 的 , 且 由 E[ |Xn| ] < oo 对 任意 ”成 立 不 能 推 得 
(i). 对 任意 ” 我 们 有 

ElXT|= E[XrI{rgn}] + EL[XrIT>n)] 
一 ElXTAn| 一 ElXnIr>ny] 十 ElXTIr>n}]. 

由 引 理 3.2, 有 EIXzAa] = [Xo], 并 且 由 假设 (it) 有 lim EIXnItr>n)] = 0. 最 后 
利用 引 理 3.3 于 W = Xr, 并 由 假设 (i), 推 知 lim EB[Xr1(r>n)] = 0. 于 是 


E[X7] = lim E[Xrn] = ElXo], 


定理 证 毕 . / 国 
下 面 是 这 个 基本 定理 的 符 干 推论 ， 
推论 3.2 ”假设 {X} 是 各, 了 是 马尔 可 夫 时 间 , 如 果 
(i) Pr{T < oo}=1, 
并 且 对 于 某 个 及 < oo, 对 任意 
(i) 五 [XfAn] & K, 
则 EI[X7] = ElXol. 
证 明 由 于 X44,, > 0, 由 条 件 (区 推 得 


K> E[Xi\nT{rgn)) 
= >_E[X#|IT = HPr{T = &} 


R= 二 0 
一 一 >》 EXZIT = KPr{T = %} 
N+ oO k=0 
= ELX4]. 


由 施 瓦 效 不 等 式 推 得 E[ |X7| ] < (BR 有 和) ”< oo, 由 此 验证 了 定理 3.2 的 条 件 (这 ， 
对 于 ( 才 ), 我 们 再 次 利用 施 瓦 效 不 等 式 得 到 


{E[Xn Trsn})} 一 {E[XTAnlr>n})} 
< E[Xfn]E[T>n)] 
< KPr{T>n}—=0, no0. 国 
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推论 3.3 ”假设 m = 0 和 六, 7,… 是 独立 同 分 布 随机 变量 ,El = 4 且 
Var[Yx] = ao2 < co. 置 X = 9 一 nn, 其 中 5, = 了 二 十 了 .如 果 了 全 是 马尔 可 天 
时 间 且 E[T] < co, 则 E[|X7|] < oo 并 且 El[X7]= ElS7r| -xpElT]=0. 

证 明 ”我 们 应 用 定理 于 蔷 {Sn 一 np}. 令 坟 =0,Y= 计 一 k=1,2,…. 为 
证 明 E[ |X7| ] < co, 我 们 有 


T 


El |Xr|]< E|D, I | 


k= 
1 


一 E|S ,> [Yk IT=n)} 


n=1 大 一 工 
= E|S) [Yk| Hrzn|. 
k= 1 


因为 JT>k} = Tr>k-1} 仅仅 依赖 于 {Yo,…, -1), 于 是 独立 于 区 . 因此 


8 


B[5 Wil rs] = 可 ID] 和 Prtr 2H 
-可 IE < % 
为 验证 定理 3.2 的 条 件 (ii), 利用 施 瓦 效 不 等 式 有 ， 
(E[Xn TT>n}) < ELXr]EIHT>n}] 


< noPr{T > n}. 


但 , co > EI[T] = Y、 kPr{T = 后 , 所 以 


k=0 


0= lim >》 kPr{T = kk} 
kK 之 n 
> lim nPr{T > nt}>0. 


6.4 可 选 抽样 定理 的 知 干 应 用 
我 们 将 看 到 , 可 选 抽样 定理 很 快 可 以 在 与 随机 过 程 有 关 的 一 些 概率 的 计算 和 佑 
计 问 题 中 找到 应 用 . 涉及 布朗 运动 的 更 多 应 用 , 将 在 7.5 节 介 绍 . 
(a) 随机 游 动 
由 可 选 抽样 定理 可 迅速 推 得 与 随机 游 动 有 关 的 许多 重要 结果 ， 首 先 我 们 讨论 
Pr{Y; = 1}=p, Pr{Y =—-1l}=g=1-p. 令 S50=0,5,=Yi+…+I,n>1. 
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先 假设 p= 9g = > 则 {5%} 是 一 个 靳 . 如 果 了 = min{n : 9 = 1}, 则 Pr{T < 
o0} = 1, 因为 5; 是 常 返 的 .但 Sr 三 1, 所 以 EB[Sr] 关 [So] = 0. 这 就 与 推论 3.3 的 
结果 矛盾 这 样 此 推论 的 假设 不 能 成 立 , 特别 , 我们 有 BI7] = oo 

继续 假设 p = 9 = 7, 但 现在 令 

T= min{n :Sn = 一 a 或 55 = 站， (a,b 为 正 整 数 ). 
令 va 是 5% 达到 4b 之 前 到 达 --a 的 概率 , 则 由 定理 3.1 有 
0= El[ST| = va(—a)+ (1 — va)b 

成 


这 个 结果 在 第 3 章 是 由 其 他 方法 得 到 的 . 
Ln 一 94 一 久 也 是 一 个 著 ， 并 且 


ElZ7] =0= [vaa’ + (1 — va)b’] — EIT), 


由 此 得 到 
五 了 | = ab. 
现在 假设 p> 9, 并 置 jy = Ef%=2Dp-0>0. 则 

Xn = On — nk (4.1) 
和 

和 = (q/p)™" (4.2) 
是 园 . 由 (4.1) 和 推论 3.1 我 们 得 到 , 对 任何 马尔 可 夫 时 间 T, 在 五 [站 < oo, 有 

五 [S7] = jEIT]. 


为 利用 (4.2), 令 
T=min{n:5,=—a 或 5, = 0}. 
履 b 
/ 全 全 d 
1 = E[X7| 一 Up 2) 十 (1 一 vo) (7) ， 
或 
_ 1- (gq/p) 
(q/p)™° ~ (q/p)” 
同 前 面 一 样 , 其 中 we 是 5%, 到 达 b 之 前 到 达 -a 的 概率 . 这 个 绪 采 又 和 我 们 在 第 3 
章 用 其 他 方法 导出 的 公式 是 一 致 的 . 


Ua 
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(b) Wald 恒等式 
设 Y=0 和 六 ,3,… 是 非 退 化 独立 同 分 布 随 机 变量 , 并 且 矩 母 函 数 . 
$(0) = Elexp{0Y1} 


对 于 9 在 某 个 包含 原点 的 开 区 间 内 有 定义 且 有 限 . 置 S660==0 和 5% = 站 十 … 十 . 
邻 -a<0 和 如 >0, 并 设 


T=min{n:Sn -a 或 5, >). 


Wald 基本 恒等式 是 


E[¢(0) * exp{0S7}] = 1， (4.3) 
对 于 满足 9(9) > 1 的 任意 6 成 立 . 这 个 恒等式 在 应 用 概率 和 统计 中 有 大 量 的 应 用 . 
我 们 将 利用 推论 3.1 证 实 (4.3). 由 6.1 节 例 (g) 知道 Xo = 1 并 且 
Xn = p(0)-"exp{0Sn,} ,n>1 
定义 了 一 个 关于 {Yn} 的 拷 , 则 


Cl [Xnt1 — Xn| | Yo 
= Xn 五 | 160) 一 exp(gYn+l) 一 二 |]. 


由 假设 , 9(0)-* < 1, 并 且 对 于 n < 了 ,exp{95n} < e*. 这样, Xn 入 所 对 于 mm < 了 成 
立 . 此 外 ， 


五 [ |¢(0)-! exp(0Yn,+1) ~ 1|] 
< 9(0) {Elexp(0Y%,+1)] + $(0)} = 2. 
于 是 , 对 于 n <, 
El |Xn41 — Xn| |Yo,:…, Yh ] < 2e°, 
为 了 应 用 推论 3.1, 我 们 只 需 验证 五 四 < oo. 令 c = + 由 于 假定 是 非 退 


化 的 , 则 存在 一 个 整数 入 和 6 > 0 使 得 Pr{ |SN|>c}>565. 令 51 = SN,52 = 
S2N — SN,** ,Sh = SkN — S(k_DN-: 则 


Pr{T > kN}< Pr{|Si|<cec}:...Pr{|S|l <e} 
< (1 — 6)*, 
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因 Pr{T > n} 关于 ”是 递减 的 , 我 们 得 到 
El[IT|= 3 Pr{T > n} 
n=] 


< NY Pr{T > kN} < NN/ < o0. 
大 一 
为 了 说 明 Wald 等 式 是 被 普 过 应 用 的 , 我 们 假设 存在 一 个 值 关 0 使 8(90) = 上 | 
此 时 (4.3) 变 为 
五 [exp{bo97 = 1. 


置 

E, = 五 [exp{bo9rj}lSr 和 —al 
和 

Eb = Elexp{00ST}|ST > 0 
我 们 得 到 

] = EPr{ Sr < 一 0 十 EvPr{STr 之 b} 
= EF, 十 (五 ) 一 Ea )Pr{ ST 之 b}, 
或 1l—E 
之 一 2 
Pr{ST > b} BE. 


倘 和 在 5S 离开 区 间 [-o, 昌 ,我 们 可 以 期 望 E。 衬 exp{ 一 90a} 和 Bs 守 exp{00b}， 当 离 
开 边 界 不 是 太 远 的 情况 下 , 情况 确实 如 此 , 这 样 我 们 就 直观 地 得 到 Wald 的 近似 式 


] 一 exp{ 一 000} 
exp{00b} ~ exp{ 一 00oa} 


现在 我 们 回 到 (4.3) 并 关于 8 形式 地 微分 它 , 得 到 
0 = 人 Blg(g)- exp{0ST} 


= E[(-T¢(0)- 7 19"(0) + $(0)- 7 Sr) exp{9S7)) 
=—$(0)EIT9(0) "exp{0S7}] + EI$(0)™™ Sr exp{0Sr}]. 


“ 置 0=0, 利 用 %0) =1 和 (0) = 五 呈 ], 则 


Pr{ ST 之 b} 涯 


0 = —E[Yi]EITI + ElS7| 


五 [57] = EIYi]EIT]. 
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关于 上 团 的 可 选 停 止 定理 


设 {Xn} 是 关于 {Yn} 的 上 著 . 依照 引 理 3.2, E[Xo] > EB[XTAn| 对 于 任何 马尔 
可 夫 时 间 成 立 . 与 堵 的 情况 类 似 倘 若 当 n 一 oo 时 , 我 们 能 够 交换 极限 与 期 望 , 我 们 
即 可 推 得 E[Xo] > E[XT]. 下 面 的 两 个 定理 是 这 方面 的 两 个 重要 情形 . 

定理 4.1 设 {Xn} 是 上 黑 , 7 是 马尔 可 夫 时 间 , 如 果 Pr{T < o0} = 1 并且 和 在 
在 一 个 随机 变量 W > 0 使 得 EIW] < oo 和 XTAn > 一 W 对 任意 7 成立, 则 


五 [Xo] > ElX7!]. 
证 明 设 c>0 是 固定 的 , 并 定义 Xt = min{c, Xn},n = 0,1,2,…, 则 {Xe} 关 
于 {Yn} 也 是 上 蒜 (参见 6.2 市 ), 所 以 
ElX0] > EIXTnn), 
由 于 
Xian| < maxtc, W} 
对 任意 ? 成立, 与 定理 3.1 一 样 当 n 一 oo 时 , 我 们 可 以 交换 极限 与 期 望 , 导出 
ElXo] > ELXT). 
然而 , 显然 E[Xo] > 五 X 人 8, 而 
lim E[X$] = lim / ~ zdPr{Xr < z} = EIXzl. 
这 样 , 即 得 到 E[Xo] > E[X7]. 上 
定理 4.2 ” 设 {Xn} 是 上 款 , 了 是 马尔 可 夫 时 间 . 如 果 对 所 有 n 有 Xn > 0, 则 
ElXo] > EI[XTHT<o0}]: 


证 明 照例, 有 
EIXo] > E[Xranl. 
由 于 Xn > 0, XTAn = XTTTsn 十 XnTTr>nl > XTHTren}, PA ElXo| > E[XTI(Tren}), 
并 且 


ElXol 之 im El[Xrl(rgn}) 


= lim 》 EIXr|T = kjPr{T = k} 
和 ro0 

一 2》_ EIXrT|T 一 klPr{T 一 k} 
k=0 

一 E[XT1T<o}). 
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权证 价值 问题 


设 Wh 为 一 种 资产 在 第 n 天 在 一 个 公共 市 场 上 交易 的 价格 ， 比 如 股市 上 的 股票 
设 7 为 在 第 n 天 的 价格 与 第 n 一 1 天 的 价格 的 比率 , 因此 , Wh = w x x-… x Jo 
其 中 Wo = ww 为 当天 的 价格 .在 这 种 情况 下 , 根据 历史 上 着 名 且 富 有 和 争议 的 “随机 游 
动 假设 ”, 可 以 断定 关 ,Y2,… 是 独立 同 分 布 的 正 随 机 变量 . 可 以 证 明 , 这 种 刻画 “理想 
市 场 ” 的 假设 导致 了 这 样 的 结果 . 目前 , 人 们 感 兴 趣 的 是 用 条 件 比 较 弱 的 著 理 论 代替 随 
机 游 动 假设 ， 设 长 期 增长 的 通货 膨胀 率 a > 0 以 及 e 所 为 关于 Yn 的 蒜 ， 因 此 ， 
Ble- ”Wn] = ElWo] = vw 或 者 BLWn] = we 所 以 a 表示 资产 市 场 价格 的 平均 增长 
率 . 

现在 考虑 一 个 权证 合约 , 即 在 任何 时 刻 权证 持 有 者 都 可 以 购买 资产 ， 只 要 资产 
的 价格 在 他 乐意 接收 的 范围 内 , 而 不 去 考虑 市 场 的 价格 为 多 少 . 在 股票 市 场 , 这 种 选 
择 权 被 称 为 “权证 ”. 如 果 必 要 , 通过 改变 价值 的 单位 , 我 们 假设 约定 的 价格 为 1. 因 
此 , 如 果 丈 。 > 1， 则 权证 的 所 有 者 就 可 以 行 权 , 以 约定 的 价格 购买 资产 , 然后 以 价 
格 Wi 在 市 场 上 卖 出 , 以 赚 取 利润 Wn 一 1. 如 果 Wh < 1, 就 没有 利润 可 言 了 . 因此 ， 
权证 持 有 者 潜在 的 利润 可 以 表示 为 


r(Wn) = (Wh 一 1) ”一 maxfT， 一 10}. 


男 一 种 保存 选择 权 是 保留 资产 , 因此 平均 的 回报 率 为 a. 这 种 选择 通常 是 有 用 的 , 当 
回报 率 6 > a 时 , 人 们 通常 采用 这 种 选择 .等 价 地 , 第 ”天 的 潜在 回报 r(W) 由 
因子 e- 所 决定 . 设 了 为 行 权 时 间 . 在 这 个 一 般 黄 模型 中 , 可 以 得 到 平均 贴现 利润 
忆 [e -一 r(H7)] 的 界限 , 它 是 关于 目前 价格 w 的 函数 , 在 矩 条 件 下 存在 9 > 1 使 得 


ElY*|Yi,..:, Yn) < ef, 所 一 1 2 …， (4.4) 


实际 上 , (4.4) 式 是 唯一 需要 的 假设 ， 对 于 市 场 价格 我 们 的 结果 既 不 依赖 于 随机 游 
动 模型 也 不 依赖 于 拷 模 型 , 而 是 这 两 个 模型 的 结合 . 注意 到 , 当 了 = co 时 , 约定 
e -7(H7) = 0, 因此 如 果 都 不 行 权 将 无 利 可 图 . 

例 ” 设 久 ,2,… 为 独立 同 分 布 的 对 数 正 态 随 机 变量 , 也 就 是 Vi = ln 了 tx 服从 
均值 为 j, 方差 为 o? 的 正 态 分 布 , 则 


1 
ElYn|Yi,:, Yn) = ElYn] = Elexp{Vn}) = exp {1 十 39") 
1 2 
因此 a= /十 50 而 


l 
ElYSIY,., Yn»-1] = Elexp{OVs)}] = exp {Op + 20202}. 
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我 们 解 关系 式 Ok + 3020? = ,可 得 (4.4) 式 等 号 成 立 的 条 件 是 


gy (+208) ?~ p 
02 


因为 6 >a =/+ 30 
2 2 N12 
9 > Wt kl 
正如 我 们 所 需 . 


回 到 一 般 情 况 , 我 们 将 证 明 对 所 有 ww > 0, Ele-8Tr(Wzr)] < f(w), 其 中 


jw) 2 {0-10 着 w<0/0-1) 
Ww — 1], 者 ww> 9/(9 一 1). 


注意 到 , 对 所 有 w > 0, 有 fo) < ws(9 一 1)9-1/09. 这 个 界限 并 不 会 影响 权证 所 
有 者 何 时 做 出 何 种 策略 . 从 而 这 个 界限 可 能 被 出 售 资产 的 卖方 用 来 降低 他 们 的 平均 
损失 . 同时 注意 到 , 如 果 当 天 的 价格 Wo = w 超过 0/(9 - 1), 则 权证 的 价值 至 多 为 
Fw) = w 一 1, 这 个 数量 只 是 在 有 瞬间 到 达 的 , 因此 当 市 场 的 价格 到 达 这 个 高 度 时 就 
应 该 行 权 . 这 个 结论 只 要 求 满足 (4.4) 式 的 矩 假 设 , 而 不 需要 考虑 每 天 价格 改变 形 
式 的 概率 分 布 . 

为 了 证 明 这 个 界限 , 设 X = e-?"*f(W), 我 们 断言 {Xn} 是 一 个 关于 {7} 的 
非 负 上 蒜 . 只 需 证 明 对 所 有 w > 0， 


f(w) >e ?Elf(w xY)), (4.5) 
E[Y®] < ep (4.6) 
只 要 因为 只 要 证 明了 (4.5) 式 , 使 用 (4.4) 式 , 我 们 就 可 以 得 到 
ElXn|Yo,:::, Yh] = ef"Elf(Wn x Yn)NYo,…, Yh 
< e Pn DFWn1) = Xn1. 
下 面 来 证 明 (4.5). 对 固定 的 上 > 1, 定义 
vt,w) = w(t—1) /tt wo0. 


则 

v(t,w) > f(w), 1<t<0,w>0. (4.7) 
我 们 将 (4.7) 的 证 明 留 给 读者 完成 . 在 gt(w) = v(t,w) 一 (w 一 和 wo = t/t 一 1) > 
0/(0 一 1) 条件 下 , 读者 首先 需要 证 明 gi(wo) = 0 和 gi(wo) = 0, 这 里 , 表示 对 包 的 
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导数 . 然后 , 证 明 二 阶 导数 gt (wo) > 0, 读者 就 知道 对 所 有 w,gt(w) > 0 或 v(t,ww) > 
(w 一 1). 其 次 , 读者 将 Inv(t,w) 对 t 求 导 并 化 简 得 
dinv(t,w) 也 
dt In{ pn — 5} 
当 多 <90/(0 一 1) <t/(t 一 1) 时 上 式 为 负 的 , 也 就 是 对 于 w < 9/(9 一 1),v(t,w) 随 着 
t 从 0 递减 而 增加 . 因此 , 当 w 在 这 个 范围 内 时 v(t,w) > v(0,w) = f(w), 
接着 , 我 们 考虑 两 种 情况 . 首先 假设 w < 9/(6 一 1), 则 


f(w)= v(0,w) 
> efv(0, w) EIYS) [由 (4.6)] (*) 
= eSElv(0,w x Y) [由 v(6,w) 的 定义 ] 
> ee 五 [fw x YY) [由 (4.7)]. 


第 二 种 情况 是 w > 9/(9 - 1 现在 , EB[Y*] 是 关于 a e [0,g] 的 凸 函数, 其 
中 E[Y?] = 1 < ef. 利用 Jensen 不 等 式 和 (4.6) 的 假设 , 对 于 Ww/(w 一 1)<08 有 
E[Y*/(w-D] < eB. 现在 考虑 


f(w)=w—1 
= v(w/(w -TD i 
> er? Elvw/w — 1,w x Y) [因为 EB(Y*/vw-!1) < eB] 
> e-BE[f(w x Y) 由 (4.7)] 


通过 (*) 和 (**) 可 以 证 明 (4.5). 因此 , X = e~?*f(W) 构成 一 个 非 负 上 款 , 并 且 
对 任意 的 马尔 可 夫 时 间 工 . 

Xo = f(w) > Ele Tf(Wr)), (4.8) 
最 后 , 我 们 验证 f(w) > r(w) = (w -1)+, 由 (4.8) 式 可 推 得 

f(w) > Ele * r(Wr)) 
正如 前 面 所 断言 的 .很 明显 地 , 对 于 所 有 ww, f(w) > 0, 以 及 对 于 w > 9/(0--1), f(w) = 
w 一 1. 进一步 地 ， 
df/dw = [(06—1)/0] we!1 <1， 对 于 w < 0/(0-1). 

通过 积分 可 以 得 到 

f(s ) — f(w) < — Ww， 
因此 , 对 于 w < 9/(6 一 1), 有 f(w) > w 一 1, 这 就 完成 了 对 不 等 式 f(w) > (w 一 1)+ 
的 证 明 . 
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水 库 问 题 


令 2 表示 容量 为 b 的 水 坝 在 时 刻 i 的 贮 水 量 , 1 为 时 间 区 间 (t,t +] 内 随机 
流入 量 , Ci 为 其 流出 量 . 由 于 著 水 量 不 能 是 负 的 , 也 不 能 超过 容量 六 因此 有 平衡 方 
和 


LA1 Es min{ (Zt 十 天 一 OO ) b} 
此 处 “zxT*” 表 示 “max{x,0}”. 
假设 由 于 航行 、 游 览 或 紧急 情况 的 需要 , 必须 保持 水 库 的 蓄 水 量 高 于 其 最 低 可 
接受 的 水 平 a. 从 而 
T=min{t: Z: < al 


是 不 满足 要 求 的 首 达 时 刻 . 需要 量 {O01} 和 容量 5b 是 可 控制 参数 或 设计 参数 , 对 于 它 
们 不 同 的 值 , 水 坝 性 能 可 用 平均 时 间 五 四] 来 比较 , B[ 了 ] 越 大 则 水 坝 性 能 越 好 . 

通常 办 法 是 对 流入 量 和 流出 量 做 较 准 确 的 假设 , 然后 计算 E[ 了 I]. 然而 , 对 于 水 
库 系 统 验 证 这 些 具 体 的 假设 通常 是 困难 的 , 由 于 季节 的 影响 和 上 游 地 表 水 的 凡 存 ， 
可 在 一 段 时 间 内 影响 水 库 的 流入 量 . 并 且 关 于 流入 量 的 分 布 , 可 供 使 用 的 信息 一 般 
很 少 , 虽然 有 过 去 资料 , 但 它 与 现在 的 相关 性 很 小 , 因为 在 整个 流域 系统 地 形 的 改变 
是 经 常 发 生 的 . 

在 这 个 例子 中 , 我 们 将 在 比较 弱 的 一 般 假设 下 得 到 平均 时 间 E[T] 的 界 . 设 在 
已 知 过 去 的 条 件 下 , 净 流 入 量 


Yt+1 = itl ~ Orr1 


的 条 件 分 布 满足 
ElYirilY1, ,Yl <m (4.9) 
和 
Elexp{—AY+ri}lY,.…, Yl < 1, (4.10) 
其 中 m 和 和 为 已 知 正常 数 . 下 面 我 们 来 证 明 E[T] > f(z), 其 中 


f(z) = 1 {oole 一 (z 一 a) bh,a <z<b, 
且 2o = z 是 初始 水 坝 蓄 水 量 . 保守 的 设计 者 把 f(z) 作为 其 设计 标准 , 因为 它 表 示 
最 坏 的 情况 , 即 著 水 量 达 到 临界 水 平 a 的 平均 时 间 最 短 . 
我 们 断言 
Xn = fl(Zn)+n 
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构成 一 个 关于 { 丈 } 的 下 坝 . 延 拓 f 的 定义 域 , 对 于 z < oa 令 F(z) = 0, 对 于 z > 了 
令 f(z) = f(b). 因而 (Zn) = f(Zn 十 Yat1). 对 任意 > 置 


g(z) = L {ool — (z— 上 
由 于 g(z) 一 直 递 增 至 z = b, 然后 递减 , 因此 对 所 有 z 我们 有 f(z) > g(z), 并 且 


ElXn+ilYo,., Yn]= Elf (Zn+i) Yo Yn] + (n+1) 
一 Elf(Zn + Yn+1)|Yo, , Yn] 十 (n 十 1) 
> Elg(Zn + gr+1I) Yo ,Yon] + (n+ 1). 
如 果 U 是 随机 变量 且 满 足 EI[U] < m 和 Ele-^] < 1, 则 对 于 a<z<b 成 立 


1 {exo) Ele—^(z+ Ua)] 
m 入 
之 f(z) ]， 


利用 以 上 的 分 析 和 假设 (4.9)、(4.10), 我 们 推 得 


Elg(z +U) - (z+ ElV]— a)) 


ElXn+1lYo, 四 , Vn] 之 f (Zn) 十 加 二 入 mn， 


即 X 是 下 描 . 令 工 = min{n : Zn < oa] 是 著 水 量 首 达 临界 高 度 a 的 时 刻 . 由 下 拷 的 
可 选 抽样 定理 , 有 
Elf(ZTan) + (T An)) 2 f(2), 


其 中 z = 2o 是 初始 水 坝 蓄 水 量 . 由 于 厂 是 有 界 孙 数 , 利用 引 理 3.3 易 得 


lim Blf(Zrn)] = BIf(Z7)] =0， (由 于 Zr < a) 


和 
jim E[TAn]= lim 》 Pr{T > A} 
k 二 1 
= >_Pr{T > 全 = 五 四 
k=1 
因此 
f(z) < lim {Elf(Zran)] + E[T An)} 
= EIT), 
这 就 是 要 证 明 的 . 272 


各 了 1， Y2， ,Yi 是 均值 为 Hi < nm, 方差 of < 21i /和 的 独立 正 态 随机 变量 ， 
则 条 件 (4.9)、(4.10) 必定 满足 . 
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上 穿 不 等 式 


给 定 一 个 关于 {Yh} 的 下 蒜 {Xn}, 以 及 实数 a < b, 正 整数 N, 定义 Vo。 是 满 
足下 列 条 件 的 数 对 (i,j) 的 数目 : 0 < i<jg&N,Xisaoaa<Xe<bi<k<j 且 
久 ; 之 b. 因此 ,Vs 表示 Xn 对 于 n= 0,1,…,N 上 穿 区 间 (a,b) 的 次 数 , 即 从 低 于 
水 平 线 a 上 穿 到 水 平 线 5 之 上 的 次 数 . 我 们 将 证 明 重 要 的 上 穿 不 等 式 


El(XN — a)'] — El(Xo ~ a)!] 


< 。 
ElVo,o] ~ pa 


(4.11) 


七 罕 不等式 指出 下 拷 所 可 能 有 的 振动 的 限度 , 并 且 提 示 了 样本 轨道 的 粗略 性 态 ， 这 
个 不 等 式 及 其 推广 和 变形 在 概率 分 析 中 被 广泛 用 于 证 明 收 敛 性 定理 和 研究 连续 参 
数 随机 过 程 的 样本 轨道 的 增长 和 连续 性 . 


我 们 需要 引 理 3.2 如 下 形式 的 推广 , 在 下 堵 情 形 它 同时 包含 了 两 个 马尔 可 夫 时 
间 . 这 是 更 加 一 般 的 可 选 抽样 定理 的 特别 情况 , 更 一 般 的 可 选 抽样 定理 是 包含 几 个 
甚至 可 数 多 个 马尔 可 夫 时 间 的 . 

5| 理 4.1 设 {Xn} 是 下 款 , 5,T 是 关于 {7} 的 马尔 可 夫 时 间 . 假设 0< 5 < 
Tg N, 其 中 入 是 固定 正 整 数 . 则 


bliXs|] < EIXT7|. 


证 明 ” 令 上 是 固定 的 , 对 于 有 < n < NN, 因为 Ifr>n} 仅 依 赖 于 Yo,…, 站 利 
用 条 件 概 率 的 性 质 , 我 们 有 


El[Xn+1l(r>n}l{s=k}] 
= E[E{XntilYo, ,Yn }r>n} Tsk}) 
> EIXnIr>n} Hs=k}] 


这 样 ， 
E[XTAnT{ se=k}) 一 E[Xrlrgn} ls=k}]| 十 ElXn TT>n} ls=k}] 
< El[Xrl(ren}l{s=k}| 十 E[Xn+tiT(r>n}l{S=k}] 
一 ElXTA(n+D) Hs=k}), 


这 是 n 的 单调 增 薄 数 . 置 n = 上, 然后 n = N, 利用 假设 5 < T < NN 导出 关系 式 


E[Xxkl{ sek}] < E|XTI{s=r}. 
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因此 ， 
BEIXs]= 》 E[lXsl(s=x}] 

k=0 

N 
一 3 E[XkT{ sk}] 

R=0 


< 3 ElXTI{s=k}] 
k=0 
一 ElX7)|, 
故 引 理 证 毕 . 
我 们 应 用 引 理 来 证 明 上 穿 不 等 式 , 定义 加 


和 


Xn = (Xn 一 0). 


由 于 9(z) = (Zz 一 a)+ = max{(z 一),0} 是 z 的 西 的 增 函数 , 引 理 2.2 告诉 我 们 {XY} 


N 如 果 蔷 ; 关 0, 对 j > Th_1， 
min17 : 7 > Ik-l, 入) 一 0}, 其 他 ; 


在 上 是 奇数 , 设 
TT N, 如 果 苹 ; < 56 一 a 对 所 有 ij > Tk_1， 
' min{7 :7 > T 1 总 ， 2 一 ao， 其 他 . 


又 置 Ty+1 = N, 则 每 个 人 是 马尔 可 夫 时 间 (请 严格 证 明之 ), 并 且 Th < 人 于 
是 , 利用 刚刚 得 到 的 引 理 可 知 


El[Xr,] < ElX7,,,]. (4.12) 
因此 
N 
XN— Xo= > (和 Rr, ) 
k=1 
一 2》, (Rn Xr, ) 十 ( 一 Xr, ). 
k=2,4,.… 上 一 1.3...， 


现在 , 如 果 & 是 偶数 ， 只 要 出 现 一 次 上 穿 则 和 rr，， 一 X17， 不 等 于 零 ， 因此 至 少 是 
(5 一 a), 上 且 由 (4.12) 知 第 二 个 和 的 期 望 值 是 非 负 的 . 这 样 一 来 ， 


EIXN 一 Xo] > (b — a)E[Va,), 


a 
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下 BlV, sl < El(XN 一 9 [一 二 一 9 
证 毕 . 图 
部 分 和 不 等 式 
设 随机 变量 Xi, X2,… 具有 有 限 条 件 矩 
M = E[Xk|X1,.:., Xk 
和 


Ve = E[(Xx ~ Mg) | 和, Xk_i]. 
令 5n 二 XX1 十 … 十 Xn(So = 0). 若 对 所 有 大 满足 条 件 
M: < 一 al (4.13) 
其 中 a 为 某 个 固定 正 数 , 我 们 将 证 明 当 x < ! 时 成 立 


Pr{ supfz 十 Sn] > | < (4.14) 
名 之 间 


l 
l+a(ll—z7z) 


假如 被 加 项 为 具有 均值 jy < 0 及 方差 o? 的 独立 同 分 布 随 机 变量 , 由 大 数 定律 , 当 
7 一 co 时 有 9, 一 一 00 并 且 M = max Sn < co( 见 第 17 章 ). 在 不 等 式 (4.14) 中 可 
取 a = jx|/o”, 从 而 得 到 


Pr{M > Ul} < oo’/[o? + nl]. 
现在 回 到 一 般 情况 , 我 们 不 假设 被 加 项 是 独立 的 . 定义 
1 当 了 < 
Fz)=《 1+a0 一 2 St 
1， 当 必 之 Ll. 


我 们 的 目的 是 在 条 件 (4.13) 之 下 证 明 {f (Zz 十 5n)} 为 一 非 负 上 园 . 知 证 得 此 事实 , 令 
7 是 使 得 z+ 5S, > {成立 的 第 一 个 n 值 , 应 用 定理 4.2, 即 有 


f(z)> Elf(z + ST)HT<o0)] 
一 Pr{ suplz + Sn| > 让 
为 后 面 证 明 方便 , 记 f(y) 的 导数 表达 式 如 下 : 


jr nN QO \ 
f(y) = Frod -yr = alf(y)], 当 y<), (4.15) 


PD PT i PT Pe Er 
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f(y=2af(y)f(y,, 当 y<!, (4.16) 
由 于 0< f(y) <1, 从 而 
f(y <2af(y, By<l. (4.17) 
固定 一 任意 点 z </!. 令 g(y) 是 y 的 二 次 式 且 与 f(y) 切 于 y= z. 因而 g(y) 具 
有 形式 
g(y) = f(z2)+ f(z)(y —z) +al(y — 2)’, 
其 中 ao 是 一 适当 常数 , 现 我 们 要 求 g(1) = f(1) = 1, 为 此 只 需 取 


a = af'(z). 


事实 上 ， 
9gU= f(z) + f(z)(l— 2)+af'(z)(! — 2)" 
= f(z){1l+oall ~— zl+a(l— 2z)]f(z2)} (由 (4.15)) 
= f(z2){1+ al! — 2)} 
=1. 


下 面 我 们 证 明 , 对 所 有 y 成 立 


9(y) > f(y). (4.18) 


为 此 , 利用 (4.17) 有 
9 (2)= 2a = 2af"(z) > f° (2). 


再 由 g(z) = f(z) 和 g'(z) = f(z) 推 知 (4.18) 在 z 的 某 个 邻 域 成 立 . 于 是 (4.18) 成 
立 的 充 要 条 件 是 对 所 有 y < 1 


(y) g(y) 


但 h(y) 是 三 次 式 , 至 多 允许 有 三 个 实数 根 . 其 中 两 个 落 在 切 点 z 上 , 而 第 三 个 是 /. 
由 于 (4.18) 在 z 的 邻 域 成 立 , 则 对 于 y < ! 必 成 立 g(y) > f(y). 这 样 (4.18) 对 所 有 
的 y 都 成 立 , 有 了 这 些 预 备 知识 , 我 们 转向 证 明 f(z + 5%) 构成 一 个 上 秽 . 令 X 是 


随机 变量 , 均值 为 m, 方差 为 v*, 且 满足 条 件 


m < 一 ao (4.19) 


令 &《 <1 为 一 任意 点 , 并 应 用 前 面 分析 于 z = & 十 m < i( 注 意 , 由 (4.19), m 是 负 的 ). 
利用 (4.18) 我 们 有 
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E[f(E + X)= Elf(z+X—m) 
< Elg(z+ Xm) 


= f(z2) + af'(z)v’ 

< f(z)— mf'(z) (由 于 f(z) > 0 及 (4.19)) 
< flz—m) (由 于 当 y<1 时 有 f(y) > 0) 
= f(é) 


这 样 , 者 XX 是 满足 (4.19) 的 随机 变量 , 对 任意 & 乏 1 必 成 立 FE) > E[f(€ + 六 )]( 当 
上 > ! 时 是 平凡 的 , 因为 处 处 有 f(z) < 1). 由 此 结果 , 并 注意 到 (4.13), 易 推 得 
El[f(z + Snti)|X1,*, Xn]= Elf(z + Sn + Xnt1)| Xi, , Xn) 
< f(z 十 Sn), 


这 就 验证 了 上 蔷 不 等 式 . 因此 (4.14) 得 证 . 

下 面 是 (4.14) 的 等 价 形式 , 由 它 可 得 许多 重要 的 不 等 式 . 

设 Xi1,X2 是 具有 有 限 条 件 冠 

Mx = EL[XE|XI, ,XE 
和 
Vi = E[(Xk 一 ME) | 

的 联合 分 布 随机 变量 序列 . 则 

Pr{Xi 十 十 Na 一 (4 十 十) 这 aa( 矶 十 十 现 )++ 对 某 个 n 之 1} 


] 
< > 0. 
于 十 ab 02 
此 结果 等 价 于 
之 ] 之 入 一 一 一 | 
Pr{Xi 十 … 十 Xn 过 思 对 某 个 n 之 1} To 
其 中 


及 大 一 XX, 一 M. 一 QaVk, 
Xk 条 件 均值 为 -aVk, 而 条 件 方差 仍 为 你, 这 样 新 的 不 等 式 立 刻 由 原 不 等 式 推 得 . 


6.5 ” 款 收 敛 定理 


在 十 分 一 般 条 件 下 , 当 ? 增加 时 , 园 X， 收敛 于 极限 随机 变量 X. 这 些 结果 的 
精确 论述 构成 了 概率 论 中 一 些 影响 深远 且 强 有 力 的 定理 .我 们 下 面 集 中 精力 于 车 
的 基本 收敛 定理 . (第 1 章 已 回顾 了 随机 变量 序列 几 种 收敛 的 概念 .) 
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定理 5.1 (a) 设 {Xn} 是 下 载 , 满足 


sup E| |Xn| ] < oo. (5.1) 
n 之 0 


则 存在 一 个 随机 变量 XX 使 {六 %} 以 概率 1 收 钱 于 Xe 即 
Pr{ lim Xn = Xe } =1. (5.2) 
(b) 如 果 {Xn} 是 拷 并 且 是 一 致 可 积 的 ( 见 后 面 附 注 5.3), 则 除 成 立 (5.2) 之 外 


{Xn} 平均 收敛 , 即 
im E|[ An 一 Xoolj=0， (5.3) 


且 对 所 有 7m. 


附注 5.1 ”对 于 一 个 下 靳 {Xn}, 如 果 五 [ |Xol ] < oo 则 条 件 
sup 五 | |Xn|j < oo 
nn 之 1 
等 价 于 条 件 
sup E[X+] < %, 
nh 之 1 
其 中 X+ = max{X,0}. 这 个 等 价 性 可 由 初等 不 等 式 XH+ < |Xn| 和 关系 式 |X| = 
2X+ 一 Xn 得 到 , 只 要 注意 到 
EL IX | =2BLX+] — ELXn] < 2B[X+] — ELXol. 


这 个 定理 特别 告诉 我 们 , 每 个 非 正 下 质 以 概率 1 收敛 , 非 负 上 鞠 以 及 有 一 致 上 
别 或 一 致 下 界 的 鞭 也 同样 如 此 

附注 5.2 ”以 概率 1 收敛 (5.2), 并 不 能 推 得 平均 收敛 (5.3), 反 过 来 也 不 行 . 然 
而 这 两 种 收 义 确实 都 列 涵 着 依 概率 收敛 


lim Pr{ [Xn 一 Xw|l>a}=0， ”对 任意 e>0. 


事实 上 , 切 比 雪夫 不 等 式 (参考 1.1 节 ) 


E[ |Xn ~ Xoo| 
上 


Pr{ | 如 一 Xel>e< ,E>0 


表明 平均 收敛 强 涵 厦 依 概率 收敛 . 
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附注 5.3 ”由 6.3 节 , 按 定义 , 如 果 
lim sup Bi| (Xn| I{ |Xn| >cH=0, (5.4) 
则 {Xn} 一 致 可 积 . (记号 I{ |Xn| > c } 表示 事件 {1Xn| > c} 的 示 性 函数 ). 特别 地 ， 


全 mn ， 
bol>e- 人 如 果 D 


今后 , 记号 “TP" 一 般 指 事件 的 对 应 示 性 函数 , 我 们 也 把 H |Xns| > c } 写 为 ( 见 6.2 


TT x le }- 

关系 式 (5.4) 可 由 下 面 两 条 件 之 一 推 得 : 

G) |Xn| < W, 对 所 有 7n， (5.5) 
其 中 W 是 满足 E[W] < oo 的 随机 变量 ; 

i) E[ | Xi+2 ] 和 天 < oo， 对 所 有 nm， (5.6) 


279| 其 中 KK 和 pp 是 常数 ,p > 0. (请 读者 证 之 ). 

我 们 将 不 证 明 一 般 形式 的 定理 5.1, 因为 它 要 求 许多 测度 论 的 知识 . 我 们 推荐 
读者 参看 Doob 的 书 1953, 第 7 章 ] 或 Neven 的 书 [1965]. 上 一 节 的 上 穿 不 等 式 是 
关键 的 工具 . 然而 , 我 们 将 证 明 一 个 收敛 性 定理 , 它 与 一 般 形式 的 证 明 相 平 行 但 所 
涉及 的 概念 却 比较 简单 . 特别 地 , 收敛 定理 5.2 涉及 满足 较 强 条 件 的 著 , 即 当 p = 1 
时 的 条 件 (5.6). 在 这 个 比较 强 的 条 件 下 , 我 们 可 得 到 更 强 的 结论 : 除了 X, 以 概率 
1 收敛 于 Xe 之 外 , 还 以 平方 平均 收敛 于 和 它 . 下 面 讨论 的 最 大 值 不 等 式 是 解决 此 问 
题 的 基本 工具 , 同时 它 还 有 许多 其 他 用 途 . 


最 大 值 不 等 式 
令 6 ,62,63,'… 是 独立 同 分 布 随 机 变量 , 日 满足 矩 条 件 Elé&i] = 0 和 EI?] = 
02 < oo. 定义 


So=0 且 SS = 各 十 十 如 n 之 1. 


注意 到 5% 的 方差 是 no”, 切 比 雪夫 不 等 式 给 出 
esPr{ |Sn| >e}sno’, e>0. 
另 一 个 更 精致 的 不 等 式 是 科 尔 丰 戈 罗 夫 不 等 式 


ezPr| es, ISx| > el < no’. (5.7) 
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上 述 这 些 不 等 式 容 易 椎 广 到 下 灶 的 情况 , 这 就 是 简单 但 却 实用 的 下 质 最 大 值 不 等 
式 (进一步 加 强 的 此 不 等 式 见 问 题 5). 

引 理 5.1 设 {Xn} 是 下 擂 , 且 对 所 有 n 有 Xn > 0. 则 对 于 任意 正 数 入, 有 


APr{ oa, Xr > A < ElXnl|. 


(5.8) 
证 明 定义 马尔 可 夫 时 间 


ee 如 果 Xk > 入 对 菜 些 k= 0,.…,n 


Nn, 如 果 Xk 二 入 对 于 k==0,1,:…,n 280 
应 用 类 似 于 引 理 3.2 的 下 著 可 选 停止 定理 , 得 到 
ElX,| 之 五 |XT| 


> E|Xr 1{ max, Xx > 》}| (因为 Xi 全 部 非 负 ) 
> APr{ Ra Xk > 和 } (由 于 在 所 示 集 合 上 Xz > 入)， 


此 即 所 希望 的 不 等 式 . 关 


由 于 {Sn} 是 一 个 园 [6.1 节 例 (a)], 并 依照 引 理 2.1, Xn = S55 确定 一 个 非 负 下 
默 , 由 此 即 得 科 尔 莫 戈 罗 夫 不 等 式 . 


no? = E[S2] 


之 Pr a, S7¢ > 》} 


一 ?Pr{ a max ISk! > | 对 于 e = VA. 
推论 5.1 设 {Xn} 是 团 , 则 对 每 个 正 数 和 


APr{ max |Xr| > A} < E[ |Xnl]. 


0g<k<n 


证 明 ”如果 {Xs} 是 著 , 由 引 理 3.1 知 {|Xn|} 是 非 人 希 下 载 . 然后 利用 刚刚 证 明 
的 最 大 值 不 等 式 . 国 


引 理 5.1 的 证 明 方 法 也 适合 于 证 明 上 鞠 的 最 大 值 不 等 式 ， 其 命题 可 叙述 如 下 ( 见 
问题 12); 


引 理 5.2 ”如 果 {Xn} 是 非 负 上 加 , 则 


Pr ax Xe > 和! < EIXo], 对 于 和 >0. 
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例 定义 Xo=1 和 X= Il Y; 对 于 n > 1, 其 中 六,Y2,… 是 非 负 独 了 随 机 
变量 且 具 有 相同 的 均值 E[Yi] = 1 那么 {Xn} 是 非 负 驳 , 并 且 由 最 大 值 不 等 式 知 


Pr{ max Xk > 和 <1/X 对 于 和 >0. (+ 


Ox<ken 
这 个 寞 是 无 甚 伸 共 的 , 我 们 可 以 解释 如 下 . 考虑 一 个 赌 徒 在 每 次 丢 一 个 硬币 时 , 以 他 
拥有 财富 的 g 部 分 下 赌 , 0 < g < 1 假设 周 徒 的 财富 开始 时 刻 是 1 元 , 据 nn 次 之 后 


7 一 | 
现 的 概率 为 5. 因此, 如 果 赌 徒 有 足够 的 耐心 , 他 将 看 到 自己 的 财富 减少 到 0. 因为 
{Xn} 是 一 个 鞭 , 它 当然 是 一 个 下 园 , 并 且 是 正 的 ， 


sup El Xn| |]= E[|X,||]=1, 


所 以 (5.1) 被 满足 . 这 样 , 当 n 一 co 时 以 概率 1 趋向 于 一 个 有 限 极限 , 该 极限 一 定 
是 零 , 因为 每 个 其 他 的 状态 都 是 瞬 态 . 在 这 个 问题 中 不 等 式 (*) 显得 太 弱 . 


拷 的 均 方 收 全 定理 


设 {Xn} 是 鞭 并 令 4 是 使 得 序列 {Xn} 收敛 的 随机 事件 . 下 面 我 们 对 集合 4 
进行 比较 严格 的 描述 . 注意 到 某 个 特定 实现 Xo, 头 1,… 收敛 当 且 仅 当 满足 柯 西 准则 


~ lim [Xm — Xn| = 0, 
于 是 4 可 以 表达 为 
A= {lim [Xm — Xl = 0 (5.9) 


也 就 是 说 , 4 是 过 程 实现 Xo, Xi,… 满足 柯 西 收敛 准则 的 事件 , 当 4 出 现时 , 令 Xe。 
表示 这 个 极限 ， 我 们 要 证 明 Pr{4} = 1. 则 Xe 可 被 定义 , 虽然 不 是 对 所 有 实现 
Xo, XX1,… 都 有 定义 , 但 至 少 对 于 具有 概率 为 1 的 这 种 实现 的 集合 有 定义 , 并 且 


Pr{ lim 大 一 X |} =1. 
+O 


在 假设 {X，} 的 二 阶 矩 一 致 有 界 的 情况 下 , 我 们 将 证 明 它 确实 以 概率 1 收敛 并 且 均 
方 收敛 . 
定理 5.2 ” 设 {Xn} 是 关于 {Yn} 的 拷 , 对 于 某 个 常数 五, 满足 


EI[X2]<K <oo 对 所 有 n. (5.10) 
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则 当 nn 一 oo 时 {Xn} 以 概率 1 均 方 收敛 于 一 个 极限 随机 变量 XX。, 即 


Pr{ lim Xn = Xoo| =1 (5.11) 
和 

im El[|Xn 一 Xe ]=0 (5.12) 
成 立 . 最 后 , 对 于 所 有 的 n 

E[Xo] = E[Xn] = E[Xow]. (5.13) 


证 明 暂时 固定 N, 对 于 kk>0 置 


Xk = XN+k — XN. 


由 全 概率 定律 得 
ElXNn+rXN|= E{E[XN+kXNIYo,.::, YN]} 
= E{XNE[XN+k|Yo,:…:, YN)} 
一 EIX%)|. 
所 以 


0 < E[X2] = E[(XN+x — XN)’) 
= 五 [XN — 2XN+kXN + X%] (5.14) 
一 EIXN+n] 一 E[XWN]. 


引 理 2.1 告诉 我 们 , 当 {Xn} 是 著 时 {Xa} 是 下 黑 , 而 (5.14) 指出 EB[X2] 是 单调 不 减 
序列 且 上 界 为 K, 因此 E[Xa] 收敛. 使 用 柯 西 准则 得 到 


0= lim {E[XN4x] — E[XN))} 
0 (5.15) 
= lim E[X2]. 
人 一 oo 


下 面 我 们 马上 就 要 用 到 这 个 结论 . 
设 4 是 {Xn} 收敛 的 事件 . 显然 


4= 满 足 lim |Xm Xn|=0 的 所 有 实现 的 集合 
一 {Xn} 如 下 实现 的 集合 : 对 任 给 s > 0, 
存在 N > 0, 满足 |XN+m 一 XN+4n| < 6, 对 所 有 m,n 二 1. 
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由 三 角 不 等 式 


[XN+m — XN+tn| < [XN+m ~ XN|+ |XN+n — XN| 


我 们 可 等 价 地 把 4 描述 为 


4=({ 对 任意 e > 0, 存在 N > 0, 使 得 对 所 有 k 关 0 成 立 |XNwHk 一 XN|<ej}. 


设 B 表示 4 的 余 事件 , 即 {X} 不 收敛 的 集合 , 则 


B = {对 某 个 e > 0, 对 每 个 N > 0, 存 在 k > 0,k 取 决 于 e 和 WN, 使 得 XN4k 一 XN| > e} 


= | {对 每 个 N > 0, 存 在 大 > 0, 使 得 |Xw+k - Xw| > e} 


gE>0 


一 (] 会 Bn(é), 


sg>0 N=0 


其 中 


Bn(e) = 由 条 件 { |XN+xk 一 XN| > 对 于 某 个 让 = 0,1,:…} 描 述 的 事件 . 


我 们 希望 证 明 等 式 Pr{B} = 0. 为 此 只 要 证 明 
Jim Pr{Bw(e)} = 0， 对 每 个 e > 0. 


因为 在 这 种 情况 下 ， 


Pr{B}= Pr{ \) 站 Bn(e)} 
e>0 N=0 
二 lmPr{ 人 Bv(e)} 
= lim Jim Pr{ Bw(e)} = 0 
为 了 证 明 (5.16), 我 们 使 用 最 大 值 不 等 式 . 固定 NN 并 置 
Xk = XN+k — XN, k=0,1,... 


切 一 (Yo,:…, YN), 


(5.16) 
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由 Jensen 不 等 式 , 或 施 瓦 效 不 等 式 , 并 利用 (5.14), 我 们 得 到 


E[|Xk|] < (EI[XR)? < VK < oo 


ElXk+1|Y, 的 ,Y4] 一 E[XNi#k+1 一 XN|Yo， ,YN+k] 
= XN+k — EIXN|Yo,:.::, YN+k] 
二 AN+k 一 入 N = 二 六， 


所 以 {名 .} 是 关于 { 访 } 的 拷 . 此 外 , 引 理 2.1 告诉 我 们 { 误 2?} 是 下 拷 ， 并 且 由 最 大 
值 不 等 式 得 


ezPr| max iX2| > e?| < E[X2), 


入 并 太刀 


2 < I 完 2] 
6 Pr{ a, IXN+k XNn|> el < ElX;) 


但 在 (5.15) 我 们 证 明了 , 当 N,n 一 oo 时 其 右边 部 分 趋 于 零 . 由 此 推 得 


0 = lim lim Pr{ max | 和 一天 >e) 
及 一 oo HH 一 cc a, | N+k N| 


= lim Pr sup Xrn — XN| > el 
只 一 oo 0<R<oo 


一 im Pr{Bn(e)}. 

这 就 证 明了 {Xn} 以 概率 1 收敛 

用 Xe 表示 极限 随机 变量 . 尚 需 证 明 {Xn} 均 方 收敛 于 Xe 我 们 仅 需 证 明 下 
面 第 二 个 不 等 号 即 可 ，; 

0 < lim E| |X, 一 大 
0 
最 后 式 子 的 极限 为 0 是 由 于 (5.15). 固定 mw 令 2Zm = | 一 ml|?, 所 以 我 们 需要 证 
明 
lim ElZm] > E| lim Zm| (5.17) 
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首先 , 我 们 有 
EZ = / Pr{2 > t}dt 
0 


ke 


一 >》 | Pr{Zm > t}dt 
k=1™ ( 


k—l)e 
oo nke (5.18) 
> > | Pr{Zm > ke}dt 
k= 二 1 


大 一 1)E 


N 
> 》 ePr{Zm > ke}, 
天 一 1 


其 中 ee > 0,N > 0 是 任意 的 . 
由 附注 5.2 知 , 以 概率 1 收敛 可 推 得 依 概率 收敛 , 由 此 , 对 于 5 > 0， 


im Pr{Zm 之 ke} 之 ,lim [Pr{2 > ke+6}— Pr{ |Zm— Z|>6 Y= Pr{Z > ke+to6}, 


其 中 2 = am Cm. 
由 于 5 > 0 是 任意 的 ， 


lim Pr{Zm > ke} > Pr{Z > ke}. 
TOO 


现在 回 到 (5.18), 我 们 有 


N 
lim ElZm]> lim DePr{Zn > ke} 


N . 
> 》ePr{2 > ke} 


大 一 上 
N 


之 》 csPr{2 > ke}—e 


K 一 0 


N (k+l1)e 


>》 | Pr{Z >t}dt—e 


(N+l)e 
之 / Pr{Z >t}dt—e 
0 
保持 s > 0 不 变 , 令 N 一 co, 导出 


386 lim BlZm] > / pr{Z > tdt -se = BIZ] 一 < 
—+» OO 0 
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由 于 = > 0 是 任意 的 , (5.17) 得 证 , 因此 {Xn} 均 方 收敛 于 Xo. 依 施 瓦 效 不 等 式 , 这 
冀 涵 着 平均 收敛 , 即 

0 < E[ |Xn ~ Xo|] < {BE[ |Xn ~ Xoof 1} 0, Bn — 0%0. 
男 一 方面 , 我 们 有 
0 < IEIXn] ~ ElXow] 
= |ElXn — Xo < El IX — Xl ] 一 0,3n 一 co， 
所 以 , EE[Xn] 一 [Xoo]. 但 E[Xn] = EIXo] 对 于 所 有 的 n 成 立 , 故 
ElXo] = ElX"] = EIXw), 


这 样 就 证 明了 挝 的 均 方 收敛 定理 


6.6 ” 鞠 收 敛 定理 的 应 用 和 扩展 


下 面 是 拷 收 敛 定 理 的 若干 应 用 实例 . 
(a) y 二 Py 的 有 寞 解 , 其 中 P = ||Pi; | 是 不 可 经 常 返 马 尔 可 夫 链 {Yn} 的 
转移 矩阵 . 拷 的 收敛 定理 可 用 于 证 明 . 


yt) = 2》, Pijy()) 
j=0 
的 有 界 解 y = {y(i)} 对 于 所 有 的 i 是 一 个 常数 , 即 对 于 所 有 的 i,j,y(i) = y(j) 成 立 . 
(与 第 3 章 定 理 4.1 比较 ). 因为 X = y(Y。) 是 有 界 蒜 参考 6.1 节 例 (d)], 所 以 以 概 
率 1 存在 lim X= lim y(Y;). 由 于 链 是 常 返 的 , 所 以 所 有 状态 都 将 无 限 多 次 达到 
( 见 第 2 章 ), 因此 
{Xn =yD} 和 {Xn = vy(7)} 
一 定 都 出 现 无 限 多 次 . 但 lim X, 存在 , 于是 我 们 必 有 y(i) = (让 


(b) f(y) = |/ f(y + z)p(z)dz 的 解 . 设 p(z) 是 连续 的 概率 密度 函数 .每 个 
常数 函数 f(y) = a 都 是 积分 方程 


f(y) = / f(y+z)p(z)dz 对 于 所 有 的 y (6.1) 


的 一 个 解 . 拷 收 合 定 理 能 够 证 明 (6.1) 的 唯一 有 界 连续 解 一 定 是 常数 函数 为 此 假 
设 f(y) 是 有 界 连续 的 , 并 且 是 (6.1) 的 解 . 那么 对 每 个 z, {jf(z + Sn)} 构成 一 个 堵 序 
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列 , 其 中 {5%} 表示 由 独立 同 分 布 随机 变量 X1, Xs,… 产生 的 部 分 和 序列 ,Xi 的 公 
共 概 率 密度 函数 是 p. 由 于 f(y) 是 有 界 的 , 满足 均 方 收敛 定理 的 条 件 , 我 们 断定 对 
每 个 zx 存在 随机 变量 Z 满足 . 
Prt lim f(z + Sn)= Urs}=1 
且 
im E[ |f(z+S5,)— Ul ]=0. 

我 们 首先 证 明 Uj 不 是 随机 的 , 而 是 一 个 常数 Us = wz), 然后 我 们 将 证 明 u(x) 实 
际 上 与 x 无 关 . 

显然 , f(z 十 Sm 一 Sn) 与 f(z 二 Sm-n) 具有 相同 的 分 布 , 其 中 mm > n. 比较 隐蔽 
的 性 质 是 二 维 随机 向 量 

{f(z+Sm), f(z+ Sm— Sn)} 
与 二 维 随机 向 量 
{f(z + Sm), f(z 十 Sm-_n)},m 之 nN. 
具有 相同 的 联合 分 布 (为 什么 ?). 利用 这 些 事 实 , 我 们 有 
Him lim El f(z + Sm)— f(x+ Sm — Sn)| ] 
= lim lim E[|f(z+Sm)— f(z+Sm-_n)]=0. 

这 是 极为 重要 的 一 步 , 下 面 我 们 立刻 会 看 到 这 一 点 . 

根据 施 瓦 效 不 等 式 , 我 们 有 

{ElUs — f(z+ Sn)Uz]}’ = {EUs{U; — f(z+ Sn)H} 
< El[U3] ' El| Us 一 f(z 十 Sn)|” |. 
但 是 由 当 ”增加 时 , 右 端 趋 于 0, 可 知 
EIUZ] = lim El[f(z + Sn)Us]. 


(6.2) 


类 似 地 , 我 们 可 导出 
Elf(z + Sn)Uz] = lim Elf(z+ Sn)f(z + Sm)). 
综合 这 些 关 系 式 得 到 
ElU2]= lim lim E[lf(z+ 5S,)f(z + Sm) 
= im “im Elf(r+ Sn,)f (r+ Sm — Sn) 
+ lim lim Blf(z + Si){f(z + Sm) ~ f(z + Sm -8 
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对 于 右边 第 一 项 由 于 S。 和 Sm 一 9, 是 独立 的 , 并 且 对 于 所 有 的 有 五 [J/(z+3n)] = 
EIUz], 由 园 收 伍 定 理 , 我 们 有 


E[f(z + Sn)f(z + Sm — Sn) 
= {ElUV2]}”. 


考察 右 器 第 二 项 , 利用 施 瓦 效 不 等 式 , 我 们 得 到 


{Elf (z+ Sn){f (z+ Sm) ~ f(z+ Sm— Sn)H} 
< EN{f(z + Sn)} 1: Ellf(z + Sm)— f(z+ Sm — Sn)l 1 


由 于 f(y) 是 有 界 的 , 当 mm 一 oo 时 最 后 的 因子 趋 于 0, 这 里 使 用 了 重要 关系 式 (6.2). 
综合 上 述 关 系 , 导出 等 式 


ElUzs] = { 忆 [Do]} 


即 U; 的 方差 是 0, 这 意味 着 Us 是 一 个 非 随机 常数 , 记 为 u(z). 


黄 具 有 和 贡 数 均值 , 利用 巩 的 均 方 收敛 定理 可 知 , 此 均值 也 是 极限 随机 变量 的 均 
值 , 因此 


jz) = Elf(z + S50)| = ElVs| = ul(z). 
至 此 我 们 已 证 明了 以 概率 1， 


lim f(z+ 5n)= vu() = f(7). 


但 我 们 有 
dim f(z+X1+ Sn ~ X1) = f(2+ Xi), 
所 以 
Pr{f(z) = f(z + Xi)} =1, 
并 由 归纳 法 得 


Pr{if(z)= f(z+ 5n)}=1. 289 


利用 这 个 事实 以 及 假设 X1 是 具有 概率 密度 函数 z(z) 的 连续 型 随机 变量 , 我 们 可 以 
证 明 对 于 任意 xz,y 有 jz) = f( 办 . 例如 当 p(z) > 0 对 于 所 有 的 z 成 立时 , 立即 可 得 
到 此 结论 , 因为 


0= Elf(z + Xi) ~ Fo = / f(z + 2) — f(z)lp(2)dz. 
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因此 对 于 所 有 的 z, |f(z +z) 一 f(z)|=0, 这 里 利用 了 假设 f(z) 是 连续 的 . 

由 此 推 得 对 于 所 有 的 z，f(z) = a, 即 (6.1) 的 每 一 个 连续 解 是 常数 . 

如 果 假 设 f(x) 在 点 zo 达到 其 最 大 值 , 证 明 可 简单 许多 . 在 这 个 附加 假设 之 下 ， 
由 (6.1) 得 到 


0= / {f(z0) ~ f(xo +Yy)}p(Y) dy = / |f (x0) — f(xo + lp(y)dy, 


当 假 设 对 于 有 所 有 的 y 有 p(y) > 0 时 , 容易 推 得 对 于 所 有 的 y 成 立 f(z0) = f (zo 二 +). 
然而 , 这 样 简单 的 证 明 对 一 般 情 况 是 行 不 通 的 . 

(c) 铅 模 型 . 考虑 6.1 节 例 (i) 提出 的 锡 模 型 , 初时 鲁 中 装 有 nn 个 红 球 和 m 个 绿 
球 , 如 前 述 , 用 Xk 表示 第 k(k = 0,1,2,…) 步 铅 中 红 球 的 比例 数 , 则 {Xk} 是 一 个 
有 界 著 , 所 以 Xo = jim Xk 以 概率 1 存在 . 

极限 随机 变量 X。 具有 Beta 分 布 . 我 们 简单 推导 如 下 . 设 吹 = (十 人 十 让 
是 第 上 步 锐 中 红 球 的 数目 . 关于 上 使 用 归纳 法 推 得 公式 


( ) (0) 
nm—] mC— 1 
Prf 罗 = 计 = ~ 


利用 斯 特 林 近似 公式 M! ~ e-7YMW(2rM)22 对 于 比较 大 的 M 和 固定 的 ; 
可 得 | ， ) ~ (M7/71. 则 


，, NSEi<n+k, N=n+m+k. 


Pr{Xx < rT}= Pr{Yr < Nz} 


_v i—1 Ni-1 N-1 
0 \n-l1 mC— 1 ni+m—1 


(i 
[LNzl/ 1.— . m—1 . 
-Fi 工人 站 (i+) 人 


其 中 A(ifk) = (i+ D/k -ik = 7 当 N 和 上 较 大 时 , n/k 可 以 忽略 , 求 和 可 以 用 
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积分 号 来 代 符 , 其 中 , z = i/k, dz 心 A(i/k), 并 且 [Nz]/k ~ z. 这 样 , 当 上 一 00 时， 
Tim+n) ff 
PT(m)T(n) Jo 
= Pr{ Xo & 7}, 对 了 于 0O<z<l1. 


这 就 是 所 要 证 明 的 Beta 分 布 . 

(d) 分 支 过 程 . 6.1 节 例 (f 指出 Xn = m- "Yh 是 著 , 其 中 mm < oo 是 分 支 过 
程 {Y} 后 代 分 布 的 均值 由 附注 5.1 所 说 明 的 基本 竺 收 伍 定理 告诉 我 们 ， Xe。 = 
,lim Xn 以 概率 1 存在 . 粗略 地 说 , Y 的 性 质 渐 近 于 Xoom", 值得 注意 的 是 整个 渐 
近 性 质 可 由 单一 的 随机 变量 和 获得 . 

在 第 8 章 我 们 将 证 明 , 只 要 m < 1,Y, 一 0 以 概率 1 成 立 . 因为 ,的 可 能 值 是 
{0, 1,….}, 这 意味 着 对 于 过 程 几乎 所 有 的 实现 , 当 n 足够 大 时 区 = 0, 因此 


Pr{Xx < 2 一 2" (1 — Zz)™ dz 


X»w = lim m "YY, =0. 
oO 


这 样 , 由 于 
1 = Elm-"*Y,] # EI[Xw] = 0, 


所 以 当 m < 1 时 序列 Xn = m-"Y 不 可 能 一 致 可 积 . 

当 m > 1 时 , 后 代 分 布 具有 有 限 方差 2, 由 8.2 节 , 我 们 得 到 方差 
m2 一 mn 
m1 ) 


VarlY,| = | 


利用 这 个 式 子 得 到 


ElXn]= {VarlYn] 十 (五 25]) W/m” 


0o* (所 ) 
mn m— 1 
0o2 


& 一 一 一 一 二 1， ”对 于 所 有 的 n. 
m(m—— 1) 


由 此 可 知 , 满足 蒜 的 均 方 收 和 敛 定理 的 条 件 . 这 样 , 1 = Xo = EI[Xo], 因此 以 正 概率 
Xeoo 是 严格 正 的 , 则 Y, ~ XXwom" 表明 次 的 增长 速度 渐 近 于 比率 为 m 的 指数 增长 
速度 . 

(e) 分 支 过 程 中 的 分 裂 时 间 , 考虑 由 粒子 构成 的 群体 , 每 个 粒子 具有 独立 随机 
寿命 , 在 生命 结束 时 , 每 个 粒子 就 分 裂 成 随机 数目 的 新 粒子 , 新 粒子 各 自 独立 地 具有 
原来 粒子 相同 的 寿命 特性 . 特别 地 , 假设 寿命 时 间 是 具有 相同 参数 a 的 相互 独立 的 
指数 分 布 随机 变量 . 
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设 X( 是 在 时 刻 t 群体 粒子 的 数目 , m 是 群体 第 ”次 分 裂 的 时 刻 (m = 0). 随 
机 变量 所 =X(m 十 0) 一 关 (m 一 0) 表示 第 n 次 分 裂 所 增加 的 后 代 的 数目 . 设 


X(0)=1, 
Si == 针 (Fi) 二 (二 0)= 世 十 包 十 … 十 蔚 十 1， 


并 定义 工 = 5 一 751 是 第 (i 一 1) 次 分 裂 和 第 i 次 分 裂 之 间 的 时 间 , 我 们 断言 随机 
变量 序列 


是 关于 {(7n,é&n)} 的 拷 . 我 们 只 需要 验证 [参考 6.1 市 例 (b)] 


1 
ElT, 一 一 | 0 ;Tn—1, €0,: én 一 0. (6.3) 


指数 分 布 的 无 记忆 性 一 些 相 关 定 义 强 涵 着 Th 是 5%_1 个 独立 寿命 的 最 小 值 , 每 个 
独立 寿命 都 服从 参数 为 a 的 指数 分 布 , 于 是 , T 是 服从 参数 a5%-1 的 指数 分 布 ( 参 
见 第 4 章 初等 问题 1). 由 此 即 可 推 得 等 式 (6.3). 

进一步 的 计算 也 利用 了 和 的 园 性 质 以 及 每 个 被 加 项 的 指数 分 布 , 我 位 有 Yo = 0 


及 
BE[Y 人 = DE[(Y 一 Y_1)?] ( 见 问题 3) 
pm!» 
和 2 人 
-De{sl(n.- a) 1]) 
二 2 
本 Del(as=) 


八 
S| sh 


人 三 站 
我 们 马上 要 证 明 E[(k/Sk)*] 是 一 致 有 界 的 , 设 其 界 为 C, 则 


BY3 So-21+TC》 kk]<o0, n=1,2,.. 
k=1 


因而 验证 了 坝 的 方 收敛 定理 的 条 件 ， 
为 了 得 到 界 C, 令 全 = 和 十 所 十 … 十 弥 , 其 中 
3 0, 如 果 6; 一 0, 
1] ， 如 果 Ei 之 1. 
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则 斌 具有 参数 为 k 以 及 p= Prf& > 0} > 0 的 二 项 分 布 , 并 且 我 们 知道 
Els*]=[1-p+ps], 0gs<gl, 


及 1+ VV < Sx, 因此 


[5]< [rim] 


1 
= / Els'*l]ds 
01 
= :| [1 — p+ psj"ds 
D 


= [k/(k+ 1 (1— pt]/p 
pl<o0. 


同时 注意 到 , 对 于 0 < c 系 1 有 


k ] k _ 
其 次 ， 利用 初等 不 等 式 (a 十 b)* 之 4ab 和 £1) 52， 的 独立 性 ， 得 


:的 


<Eb 时 . 本 
1 1 
Eee er 


ls) 
即 当 ”是 偶数 时 , 它 是 E[(n/Sn)] 的 界 , 当 n 是 奇数 时 ， 
| ) |< (SS ) 5[(E) | 
< 4(2) 


由 是 , 如 果 我 们 取 C = 16/p2, 则 对 于 所 有 的 大 都 有 EI(k/Sk)?] < C 
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我 们 应 用 团 均 方 收敛 定理 得 到 Ye = lim Yn 以 概率 1 存在 . 由 于 >， 五 = mm， 


4 一 二 


1 
Tm — a1) ,Se 一 Yee， 当 史 一 oo. 


2 


(6.4) 
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我 们 分 析 级 数 》 1/(S;_1) 的 性 质 之 后 可 以 得 到 进一步 推论 . 设 y= El&] > 0. 由 
i=1 
强大 数 定律 我 们 知道 
一 On HH, 当 n 一 OO， 
7 
以 概率 1 成 立 , 我 们 写 


1 oo 1 1 
inn 2 Bi Si_1 -起 二 二 ma 》 DE 


1—1 
对 任意 es > 0, 选择 N 足够 大 使 得 对 于 所 有 的 i > N,1i/5; - 1 < e. 另 一 方面 , 对 
任何 固定 的 N, 当 nn 一 0% 的 起 0. 由 这 些 佑 计 导 出 结果 : 


lim su 一 = 》 二 | se 
> 1 1 一 2 


N+OO 


因为 = 是 任意 的 , 我 们 得 到 以 概率 1 


lim ©— 二 一 ， ， 
noo Inn 全 Si_1 Kk (6.5) 


结合 极限 (6.4) 与 (6.5), 我 们 求 得 


Tn C—O— — YY, Wn 一 o0. 
及 


并 且 此 极限 也 是 在 概率 1 的 意义 下 取 的 . 另 一 方面 , 值 是 注意 的 是 
Ton — Th (a1) tn2 


却 渐 近 于 一 个 常数 

(f) Doob 过 程 . 我 们 将 说 明 Doob 过 程 [ 见 6.1 节 例 (k)] 是 一 致 可 积 的 , 并 且 满 
足 闭 收敛 定理 的 所 有 条 件 . 令 Z, Yo, Yi,… 是 一 列 随机 变量 旦 E[ 12| ] < oo. 我 们 已 
经 证 明 ( 见 6.1 节 例 (k)) 


Xn = ElZlYo, ,Ys], n=0,1,2,... 
确定 了 一 个 蒜 , 并 且 满 足 

E[|Xnl] < EL12|]， ”对 于 所 有 的 n (6.6) 
由 软 的 最 大 值 不 等 式 得 到 


~1 —1 
Pr{ max, |X# > A < NBL Xn| ] < A-1EL Z|), 
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这 样 , 对 于 UV = sup |Xk| 有 
k 之 0 


Pr{U > A} & ME[|Z|]. 


重要 的 是 
dim Pr{U > A} =0 (6.7) 
推 得 7 是 有 限 值 随机 变量 . 因此 , 当 六 一 co 时 有 
Bll21]> 到 12lrfo< 口 < NY (记号 1{ ]} 见 附注 5.3.) 
- a Zk <U<k+HPA{E SU <h+1} 
a Zk <U<k+UP{k SU <k+1} 
- 可 lz 
由 此 得 295 
Jim El|Z| {UV > NH =0. (6.8) 


我 们 进一步 验证 附注 5.3 的 一 致 可 积 性 要 求 . 由 (6.8) 有 


IEIXnI{IXn| > oe)]| 
< E[(I{|Xn| > cH)(E[|Z yo, Yn])] 
< E[ |ZII{ |Xn| > oh 
< El|ZII{U > cj 一 0 当 c 一 00. 


这 样 , {Xn} 一 致 可 积 , 因此 我 们 可 以 推 得 , 对 某 随机 变量 X， 


lim 从 hn 二 入 ow， 


并 有 目 关系 式 
五 | 人 co] = ElXo] 
和 
E| |X, ~ Xow| |] 一 0， 当 n 一 oo 
都 成 立 . 关系 式 
Xo = ElZ|Yo, 让 (6.9) 


是 正确 的 , 尽管 这 个 条 件 期 望 的 准确 意义 已 超出 本 节 的 范围 ( 见 6.7 节 ) 


| 和 
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下 面 将 把 上 述 结果 应 用 于 数学 分 析 . 假设 W 是 [0,1) 上 均匀 分 布 的 随机 变量 
定义 了 如 下 : 
=k2-*， 对 于 人世 友 <( 人 十 1)2-7. 
由 6.1 节 例 四 知 , 0,…, 确定 了 W 的 有 尽 二 进位 展开 的 前 ”位 . 
令 了 是 定义 在 [0, 1] 上 的 任意 函数 满足 
/ |f(w)ldw < oo. 
0 


置 2 = f(W) 并 注意 到 
入 mn 一 五 [2 Yo 了] 


(k+1)/2" 
— 2n / flwjdw， 如果 kK/2* <W <(k+1)/2" 
k 


/ 27 
由 刚刚 证 明 的 关于 Doob 过 程 的 结果 知 ， lim Xn = Xoo 存在 , 并 且 由 于 Yo, ,YY,，…: 
给 出 W 的 完全 二 进位 展开 , 因此 自然 可 以 假设 
X= ElZ|Yo, Yi, 
= E[f(W)IW) 
= f(W). 
虽然 这 已 越 出 我 们 的 范围 , 但 如 果 添 上 “以 概率 1” 的 限制 , 则 它 确实 是 正确 的 . 于 
是 我 们 已 证 明了 以 概率 1， 
f(W) = im fn(W), 


[R(tw)+1]/2" 
fa(w) = 2° / fd 
1 tt 


此 处 


其 中 kh(w) 由 不 等 式 
k(w)/2" < w < [ku) 十 1]/2n 
唯一 确定 
每 个 逼近 函数 f 都 是 阶梯 函数 , 它 在 每 个 区 间 |k/2", (十 1)/2") 都 是 常数 . 这 
样 , 任意 可 积 函数 可 以 用 一 个 阶梯 函数 序列 户 依 下 述 意义 来 逼近 ; f(uw) = lim fn(w) 
对 于 uw“ 几 乎 每 个 " 成 立 , 即 对 概率 为 1 的 集合 中 的 每 个 w 都 成 立 
最 后 , 由 已 | |/GY) 一 户 ()| ] 一 0 可 推 得 


lim, f(z) — fn(z)ldz = 0. 
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6.7 关于 o 域 族 的 著 


直到 现在 为 止 我 们 总 认为 条 件 期 望 是 利用 条 件 公布 计算 的 期 望 ， 这 对 于 形 如 
E[X|Yo,…, Yn] 的 条 件 期 望 大 体 上 是 可 行 的 , 其 中 X,Yo,… ,Yh 具有 联合 密度 函 
数 或 都 是 离散 随机 变量 .然而 , 当 推 广 到 更 加 一 般 的 情况 , 例如 五 Ko, 丽 或 
E[XIY(w),0 < w < 就 难以 处 理 了 . 

男 一 个 比较 现代 的 处 理 方法 是 定义 和 计算 关于 某 个 事件 集合 的 条 件 期 望 , 这 个 
集合 被 称 为 一 个 o 域 , 而 不 再 仅仅 是 关于 有 限 个 随机 变量 . 这 样 , 自然 促使 我 们 定 
义 关 于 一 个 o 域 族 的 园 . 下 面 我们 简要 氢 述 一 下 这 些 在 现代 概率 论著 作 中 经 常 出 
现 的 概念 ， 


概率 公理 化 体系 概述 

本 书 大 部 分 通过 分 布 函 数 研究 随机 变量 . 例如 , 在 一 开始 我 们 就 认为 一 个 随机 
过 程 {X(t); te T} 是 确定 的 , 一 旦 所 有 的 有 限 维 分 布 

F(z Tnytly tn) = Pr{X() & x1,. ,X(tn) < zn} 

都 确定 . 现在 我 们 需要 更 多 的 细节 和 结构. 

回忆 概率 理论 中 基本 元 素 是 : 

(1) 样本 空间 , 即 集合 Q, 其 元 素 w 对 应 一 个 实验 的 可 能 结果 ; 

(2) 事件 族 , 即 Q 的 某 些 子 集 的 集合 下 . 如 果实 验 结 果 w 是 4 的 元 素 , 我 们 便 
说 事件 4 出 现 ; 

(3) 概率 测度 , 即 定义 在 和 上 的 函数 P, 它 满足 

(a) 0= Po < PIA] < P[Nl = 1, AEeF, ( 儿 = 空 集 )， 


(b) PI[A1 (A2] = P[A1| + PlAs] — PIA As), Ai E 大， 1 一 1,2， (7.1) 


(9 P| U hn| = 》 PL4, 4 e 下 瑟 不 相交 , 即 hi A; = Ci 
n= 二 1 n= 二 1] 
此 三 元 组 (9, 下, P) 称 为 概率 空间 . 


例 ” 当 仅仅 存在 可 数 个 可 能 结果 时 , 璧 如 说 Q = {wi,wo,…}, 我 们 可 以 取 Q 
的 所 有 子 集 构成 的 集合 作为 二 . 如 果 p1,p2,… 是 非 负 数 且 5 ps = 1, 规定 


PlA| = 》_ pi, 


wi 


则 PP 是 下 上 的 概率 测度 
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把 9 的 所 有 子 集 的 集合 看 作 是 事件 族 往往 并 不 是 我 们 所 希望 的 , 也 是 不 合 迁 
的 . 事实 上 , 当 9 不 可 数 时 , 在 保证 性 质 (7.1) 的 所 有 子 集 的 集合 上 , 定义 一 个 概率 
测度 是 不 可 能 的 . 无 论 如 何 , 我 们 都 规定 使 得 (7.1 a) ~ (7.1 ce) 成 立 , 且 事 件 族 天 
应 满足 

(agsefF, Qe 

(b) 大 4e€e, 则 A ee 大 ,这 里 


Ah° = {w € Q;w #¢ 4A} 是 4 的 余 集 ; (7.2) 
(©) [An ef, 当 An ESF,n= 1,2,... 


n= 二 1 
集合 0 的 子 集 族 天 阁 满 足 (7.2 a) ~ (7.2 c) 便 称 为 o 域 . 如 果 研 是 o 域 , 则 
门生 = (Us) EF, 
n 二 ] n=1 


只 要 hn € 和 7 = 1,2,…. 显然 , 三 中 集合 的 有 限 并 和 有 限 交 也 属于 天. 
在 这 个 结构 下 , 一 个 实 值 随机 变量 X 是 定义 在 Q 上 满足 由 下 面 给 出 的 某 种 “可 
测 性 ” 条件 的 实 值 函数 . 随机 变量 X 的 分 布 函数 可 由 下 式 给 出 : 


Pr{fa < X <b}= Pl{w:a < X(w) < b}. (7.3) 
换 句 话说, 随机 变量 X 取 值 在 (a, 上 的 概率 就 是 满足 a < XX(w) 和 5 的 结果 ww 和 集 
合 的 概率 . 各 要 (7.3) 有 意义 , 则 XX 不 能 是 2 上 任意 函数 , 而 必须 满足 条 件 
{w:a<X(w)<b}efF， 对 于 所 有 的 实数 a < 


因为 大 正 是 那些 使 得 PI4] 有 定义 的 集合 4 的 全 体 . 实际 上 , 利用 o 域 下 的 性 质 
(7.2 a) ~ (7.2 0), 内需 要求 对 于 所 有 的 z， 


{w:X(w) 入 ZE 和 


就 足够 了 . 设 A 是 Q 子 集 的 任 一 o 域 , 我 们 说 是 关于 4 可 测 的 , 或 简单 地 , 是 4 
可 测 的 , 如 采 对 于 所 有 的 实 值 x 


{w:X(w)< rEeA. 
这 样 , 每 个 实 值 随机 变量 都 是 天 可 测 的 . 一 般 地 说 , XX 可 能 关于 比较 小 的 o 域 也 是 
可 测 的 . 
由 随机 变量 X 生成 的 o 域 定义 为 使 得 X 可 测 的 最 小 o 域 , 记 为 F(X). 它 是 
由 这 样 的 集合 4 构成 的 , 4 属于 任何 使 得 X 可 测 的 o 域 . 例如 , 如 果 X 仅 有 可 数 
多 可 能 值 zt xz2,…, 集合 
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Ai={w: XW)= 7 i=1,2,.. 
构成 8 的 可 数 分 割 , 即 


并 且 
Ai{ |4; = 名， 如 果 i 关 
这 时 , 天 ( 针 ) 是 由 ,9 和 4; 的 所 有 并 集 组 成 . 
例 ”对 于 那些 完全 不 巩 悉 这 种 框架 的 读者 , 下 面 简单 的 例子 有 助 于 理解 这 些 概 念 . 
我 们 做 如 下 试验 , 丢 掷 一 枚 镍 币 和 一 枚 银币 , 并 观察 其 出 现 正面 或 反面 , 取 为 
(} = {(H, H), (H, T), (T, H), (T, T)}, 


其 中 , 举例 说 , (H, T) 表示 结果 “ 镍 币 是 正面 , 银币 是 反面 ". 我 们 取 9 的 所 有 子 集 的 集 
合作 为 事件 族 . 在 9 中 假设 每 个 结果 是 等 可 能 的 , 我 们 得 到 概率 测度 为 下 表 所 示 : 


AET PIAI AEF P(A) 
2 0 0 1 
{(H, H)} {(H, T), (T, H), (T, T)} > 
{(H, T)} ; HE H), (T, HT T)} 
{(T, H)} 2 {(H, H), (H, T), (T, T)} ” 
{(T, T)} {(H, H), (H, T), (T, H)} > 
{(H, H), (H, T)} > {(T, H), (T, T)} 1 
{(H, H), (T, H)} {(H, T), (T, T)} 1 
{(H, H), (T, T)} 。 {(H, T), (T, H)} 1 


事件 “ 镍 币 是 正面 " 为 {(H, 苇 ,(H, 了)}, 按照 上 表 其 概率 是 3, 这 与 实际 相符 
若 镍 币 是 正面 , 令 X 为 1; 若 镍 币 是 反面 , 令 Xa 为 0. 类 似 地 , Xa 是 对 应 于 银 
币 的 随机 变量 . 令 2 = Xu + Xa 是 正面 总 数 . 作为 9 的 函数 , 我 们 有 


wEN Xn(w) Xa(w) Z(w) 
(H ,Hl) 1 1 2 
(H, T) 1 0 1 
(T, H) 0 1 ] 


(T, 工 ) 0 0 0 
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最 后 , 由 X 和 2 产生 的 o 域 是 


F(Xn) = 8,0,{(H, H), (H, T)}, {(T, H), (T, T)}, 


7(2) = 2,0,{(H, H)},{(H, T), (T, H)}, {(T, T)}, 
{(H, T), (T, H), (T, T)}, {(H, H), (T, T)}, 
{(H, H), (H, T), (T, H)}. 


三 (Xn) 包含 4 个 集合 , 下 (2Z) 包含 8 个 集合 . 请 读者 考虑 ,XX 关于 (2) 是 否 可 测 ? 
或 Z 是 否 关 于 下 (Xn) 可 测 ? 

每 一 对 随机 变量 X,Y 确定 一 个 o 域 称 为 由 X,Y 生成 的 o 域 . 它 是 使 得 蒜 
和 了 均 可 测 的 最 小 o 域 . 这 个 o 域 是 由 这 样 的 集合 4 组 成 的 , 4 属于 任何 使 得 
和 和 Y 都 可 测 的 o 域 . 如 果 六 和 YY 假定 都 仅 有 可 数 多 个 可 能 值 , 譬如 说 , 分 别 为 
Z1,72…… 和 妨 ,y2……， 则 集合 


Ai; = {w : XW) = Ti,Y(w) = y;}, 1,7 = 1],2,.:…: 


是 Q 的 一 个 分 割 , 并 且 下 (X,Y) 正好 是 由 g,0 及 hi; 的 所 有 并 集 组 成 的 . 注意 到 
X 关于 (X,Y 了 ) 可 测 , 故 F(X) C (X,Y). 

更 加 一 般 地 , 令 {X(t);t eT} 是 任 一 随机 变量 族 , 则 {X biteT 所 产生 的 o 
域 是 使 得 每 个 随机 变量 X(t),t e 工 部 可 测 的 最 小 o 域 , 记 为 {X(t);t € TT}. 

由 实数 集合 构成 的 一 个 o 域 起 着 特别 作用 . 这 就 是 着 名 的 Borel 集 的 o 域 , 它 
是 由 函数 f(z) = zx,x% € (一 00, 00) 产生 的 o 域 , 它 也 是 包含 一 切 区 间 (a,0], 一 00 < 
a 50< +oo 的 最 小 o 域 . 一 个 实 变量 的 实 值 函数 如 果 关 于 Borel 集 的 o 域 是 可 涡 
的 , 称 为 Borel 可 测 的 . 

在 nn 维 欧 几 里 得 空间 , Borel 集 的 o 域 是 由 函数 族 


ey 


{filT1,° ,Tn) = Zit = 1,2,...,n} 
产生 的 o 域 . 
关于 ec 域 的 条 件 期 望 


尽管 每 个 随机 变量 Y 都 产生 一 个 o 域 (7), 但 并 不 是 说 每 个 o 域 都 是 由 这 
种 形式 生成 的 . 因此 下 面 关 于 o 域 的 条 件 期 望 是 关于 随机 变量 的 条 件 期 亡 的 推广 . 
我 们 先 从 其 严格 的 定义 开始 . 
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定义 7.1 设 X 是 概率 空间 (Q, 下 ,P) 上 的 一 个 随机 变量 , 且 EB{ |X| ] < oo. 
令 刀 是 丰 中 的 一 个 c 域 , 即 每 个 集合 Be B 都 是 下 的 元 素 .关于 8 的 条 件 期 望 定 
义 为 具有 如 下 性 质 的 随机 变量 E[ X|B ]， 

(i) E[X|8] 是 关于 8 的 可 测 函数 ; 

(i) 对 于 所 有 的 B € 8, E[XIs] = E{E[IX|8]Ig}, 其 中 Is 是 B 的 示 性 函数 . 

条 件 (i) 等 价 于 条 件 

(这 ) 对 每 个 有 界 的 8 可 测 随 机 变量 2Z, E[X2Z] = E{E[X|8]2}. 

关于 上 述 定义 有 如 下 几 点 说 明 . 首先 , 可 以 证 明 当 E[|XIi| < oo 时 , 满足 Gi) 和 
(i) 的 随机 变量 是 存在 的 , 所 以 定义 是 非 空 的 . 事实 上 , 只 要 E[X+] 和 E[X-] 不 同 
时 为 无 限 , 上 述 定 义 即 有 意义 . 另 一 方面 , 满足 定义 中 (i)(ii) 的 条 件 期 望 EI[XI8] 可 
能 不 止 一 个 . 这 样 , 我 们 可 以 谈 及 条 件 期 望 的 不 同 “变形 ”. 幸运 的 是 , 任何 两 个 变形 
以 概率 1 都 是 相等 的 . 即 , 如 果 ED[XIB8] 和 EQ%[X|8] 满足 (i) 和 (让, 则 


P{EWIXIB| = EWIXIB)} = 1. 


因此 , 从 概率 意义 上 看 , 条 件 期 望 定义 中 不 确定 性 不 会 引起 麻烦 最 后 让 我 们 说 明 
(i) 和 (i) 的 等 价 性 . 显然 (i) 可 以 推出 的 ), 因为 我 们 可 取 2 是 如 下 有 界 的 8 可 
测 函 数 

1, 若 weB,， 

0， 大 wg¢B. 


相反 的 绽 涵 关系 是 由 于 任何 可 积 函 数 可 以 通过 适当 的 阶梯 函数 


Z(w) = Tp(w) = | 


Zn(w) = >», Qin TB (Ww) 
4 一 上 二 


来 通 近 , 其 中 {B1,…, Bn} 是 2 的 有 限 分 割 且 Bi e 8. 这样，( 辽 ) 对 2 是 成 立 的 ， 
通过 极限 过 渡 ，( 辽 ) 对 任何 有 界 8 可 测 随 机 变量 也 成 立 , 

在 第 1 章 我 们 将 已 知 Y =y 时 半 的 条 件 期 望 表达 为 

(D E[XIY = 引 是 y 的 函数 , 且 满 足 

(IT) 对 每 个 有 界 函数 9， 


歼 [XgO = / EIX|Y = yjg(y)dFy (y). 


我 们 希望 现在 的 条 件 期 望 的 定义 可 以 作为 前 面 定义 的 推广 , 即 当 8 = fF(Y) 
是 由 随机 变量 Y 产生 的 o 域 时 与 前 面 的 定义 相 吻 合 . 可 以 证 明 随 机 变量 2 关于 
8 = AF(Y) 可 测 当 且 仅 当 2 = f(Y), 其 中 f 是 某 个 Borel 可 测 函 数 . (问题 13 要 求 
在 8 是 某 可 列 分 割 Bo 的 并 的 情况 下 证 明 这 个 命题 .) 这 样 , (D 说 明 五 XIY] 是 关 
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于 8 = FF(Y) 可 测 的 , 而 (ID 可 推 得 (说), 即 对 于 所 有 有 界 的 2 = f(Y), EL[X2] = 
E{E[XIY]2} 成 立 . 因此 , 定义 7.1 推广 了 关于 随机 变量 的 条 件 期 望 . 
最 后 , 我 们 来 讨论 一 个 特殊 情形 , 0 = {wi,w2,…} 是 可 数 的 , 下 由 9 的 所 有 子 
集 构成 , P 由 下 式 给 出 
PlI4A]l= 》m， Ae,, (7.4) 


witA 


其 中 pi,p2,… 是 和 为 1 的 非 负 数 . 随机 变量 X 的 期 望 定义 为 


EIX] = 》 X(wi)p;, 
?了 一角 
假定 上 述 级 数 是 绝对 收敛 的 . 令 Bo = {Bi1, B2,…} 是 9 的 可 数 分 割 , 并 令 有 是 由 
4,9 和 Bo 中 所 有 可 能 的 并 集 构成 的 o 域 . 对 于 Bo 中 每 个 Bj;, 定义 初等 条 件 期 望 
为 


EIXIB;] = >》 X(wk)P[l{wxr}B)) 


wkEB; 
其 中 
PIAIBj] = PIANB]/PIB), AeF. (7.5) 
在 P[Bi] = 0 的 情况 下 定义 是 无 效 的 , 因为 这 时 式 子 右边 出 现 一 . 当 P[Bj] =0 时 
任意 置 BE[X1B;] = 17, 这 样 就 完成 了 定义 . 当然 这 里 也 出 现 了 如 定义 7.1 附注 中 所 
指出 不 唯一 的 问题 . 下 一 步 是 按 如 下 公式 定义 随机 变量 ELX|8| 
EIXIBI(w)= BEIXIB 如 果 s€ B; 


= > E[X|B;]IB; (w), 
其 中 


1, 行 weE 甩 ij， 
mw-1 0 若 w¢ B;. 


这 样 , 随机 变量 EIXI8] 在 每 个 集合 B; 上 是 一 常数 , 因此 是 8 可 测 的 . 我 们 检验 定 
义 7.1 中 的 ( 训 . 令 Be 8 是 任意 指定 的 , 壁 如 说 B = 【Bi;, 其 中 Be Bo,n = 
n 二 ] 


OO 


E[XIp|= 2», 2», X(wk)pk, 


n=1 WkEB’ 


6.7 关于 ar 域 族 的 鞠 
而 另 一 方面 我 们 有 


E{E[IX|B]Ip} = 》 EIX|IBi]PIB] = >, 2, (wk)pk. 


多 一] 人 一 1 wrnEB’, 


这 就 验证 了 (六 ). 
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现在 我 们 说 明 , 当 P[B;] > 0 时 E[X1B;] 的 初等 定义 可 以 由 定义 7.1 中 取 B= 


B; 得 到 . 这 时 (ij) 变 成 


>》 X(we)pr = >, ELXIB](wk)px 


wkEDI wkEB; 


(7.6) 


EIX|8] 是 8 可 测 的 当 且 仅 当 它 在 每 个 B; 上 取 常 数值 , 记 为 a;. 这样, (7.6) 变 为 


>》_ X (wk Pk 一 a; Pl[B;), 


wrkEB; 
并 且 常 数值 oj 一 定 是 
@;= 》 X(wk)pr/ PB) 
weEB; 
= E[X|B;,), 
只 要 PIBj] > 0. 


这 样 一 来 , 当 8B 是 可 数 分 割 Bo 的 并 的 o 域 时 , 定义 7.1 包含 了 条 件 期 望 的 直观 


定义 . 


关于 随机 变量 的 条 件 期 望 是 在 条 件 分 布 之 下 计算 的 期 望 ， 当 我 们 把 “相等 " 理 
解 为 “以 概率 1 相等 则 关于 o 域 的 条 件 期 望 保留 了 关于 随机 变量 的 条 件 期 望 大 
部 分 熟知 的 性 质 . 为 了 便于 参考 , 我 们 列 出 这 性 质 , 它们 对 应 于 第 1 章 的 (1.6)、(1.7) 
和 (1.10)~(1.14). 但 关于 (1.8), 没有 比较 满意 的 类 似 式 子 . 我 们 假设 Xi, XX2 和 X 


是 具有 限期 望 的 随机 变量 , ai, a 为 实数 ,4 和 6 是 三 的 子 o 域 . 则 
ElalXi 十 a2X2|B| 一 a1E[X1|B| 十 a2E|X2|B8]|; 


XX 之 0 纺 涵 着 E[X|B8] > 0; 


E[X2|8| = 2Z .BIX|8], 对 每 个 有 界 5 可 测 函数 2 
EIX2] = E{2 .EIX|8]}, 对 每 个 有 界 B 可 测 函数 2 
E[2|8] = 2Z, 车 2 是 8 可 测 且 满足 B[ 12| ] < oo 


(7.7) 


(7.8) 


(7.9) 
(7.10) 
(7.11) 
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EIX|A] = E{EIXIB]|A}, 如 果 4c 8B; (7.12) 
EIX| = E{E[IXIB8I} (全 概率 公式 ). (7.13) 
验证 这 些 式 子 的 方法 都 是 类 似 的 , 我 们 验证 (7.7) 作为 例子 . 我 们 证 明 a E[X118] 

十 a2B[X2|8] 满足 Ela1X1 十 a2X218] 的 定义 条 件 . 首先 , 它 是 两 个 8 可 测 随 机 变量 的 

线性 组 合 , 也 是 8 可 测 的 . (问题 14 要 求 当 8 是 可 数 分 割 Bo 的 并 的 o 域 时 证 明 这 个 命 

题 .) 这 样 , a1B|Xi118j+azEIX2|8]| 满足 定义 7.1 的 i). 然后 用 a1 EB[X11B]+a2EIX2183] 

代替 五 [al Xi + a2X2|B8] 检验 (这 ) 是 否 满 足 . 考虑 任何 一 个 有 界 B 可 测 函 数 Z, 我 

们 有 

El{a Xi + a2X2}2Z|= a EIX1Z| + ao 五 |X22] 
aE{EIX1|BIZ} + a2E{E[X2|B12} 
= E{(a1ElX1|B| + aoE|Xo|B|)Z}. 


这 就 完成 了 (7.7) 的 验证 . 
关于 c 域 递 增 族 的 鞭 
设 {Xn}g 是 概率 空间 (9 大, P) 上 的 一 实 随 机 变量 序列 . 令 {三 } 是 三 的 一 列 
子 o 域 , 满足 
FoCFICCfnC..:CF. 


如 果 对 每 个 n, Xn 是 7 可 测 的 , 则 称 {XX} 适应 于 {天 ,}. 例如 , 假设 ,Yi,… 也 定 
义 在 (人 ,下 , P) 上 , 并 且 万 是 由 {76, 了 了,…, 训 } 产生 的 o 域 . 则 对 于 所 有 的 n 


fn C niC 


并 且 如 果 {gn(.，……)} 是 一 列 Borel 可 测 函 数 而 X。 = gn(Y,… ,Ya). 则 {Xn} 适 
应 于 {Fn} 

正 像 早先 对 于 (Yo,…,Y,) 所 叙述 的 那样 . 我 们 再 次 把 瑚 , 看 成 包含 时 刻 n 为 
止 得 到 的 信息 , 则 Xn 关于 万 = 天 (Y6,…,Y) 可 测 当 且 仅 当 X 可 由 (Y6,…, 芭 ) 
所 确定 。 / 

关系 万 C Fst1 表示 随 着 n 增加 , 信息 不 断 增加 

定义 7.2” 设 {Xn} 是 定义 在 概率 空间 (9, 大 , P) 上 的 一 列 随机 变量 . 令 {F] 
是 下 的 一 列子 o 域 且 对 于 所 有 的 m 有 


fn CC fntl C 二. 


{Xn} 称 为 关于 {Fn} 的 下 坝 , 如 采 : 
(i) {Xn} 适应 于 {F}( 即 每 个 Xn 是 三, 可 测 的 )， 
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(i 对 于 所 有 的 m， E[X#] < oo， 

(这 ) 对 于 所 有 的 mw， El[Xn+ilfn| > Xn,. 

如 有 果 {一 Xn} 是 下 载 , 则 {Xn} 称 为 上 拷 .， 如 果 {Xn} 和 {一 XX,} 等 为 下 团 ， 则 
{Xn} 称 为 天 于 {五 ,} 的 款 ， 

下 面 的 说 明 可 能 对 读者 有 所 帮助 . 如 果 {Xn} 是 鞭 , 则 


Xn = EIXntilFnl. (7.14) 


由 条 件 期 望 的 定义 , 右边 部 分 是 万 可 测 的 , 所 以 右边 也 是 万 ,可 测 的 . 因此 , 对 于 加 
由 (7.14) 可 推 得 (i). 利用 条 件 期 望 的 性 质 , 条 件 (证 ) 可 等 价 地 叙述 为 
(iii’) 对 于 所 有 的 有 界 可 测 函 数 2 > 0， 


忆 [X 12] > ELX, 2]. 
为 了 由 (ii) 推 得 (过 ), 我 们 利用 关于 o 域 条 件 期 望 的 定义 和 性 质 (7.7)、(7.8) 得 到 
E[Xn+112] = E{E[Xnti|F,]2} > E[Xn 2]. 
为 了 从 (四 ) 导出 (i 利用 
E{E[Xnt1lFn]2} = E[Xn+12] 
得 到 对 于 所 有 的 有 界 万 可 测 函 数 Z > 0， 
EP{(ElXntnilfn] — Xn)Z} > 0. 


现在 了 = EXn+ti|Fn] 一 Xn 是 万 可 测 的 , 并 且 如 果 对 于 所 有 的 有 界 三 , 可 测 函 数 
2Z。z0 有 天 Y2]>0 则 Y>0.( 问 题 15 要 求 在 8 是 由 可 数 分 割 Bo 的 并 集 构成 的 
0 域 的 情况 下 证 明 此 命题 . ) 由 此 ， 


Y = ElXnnlf,] — Xn, >0. 


这 怠 是 (说). 

本 章 开头 氢 述 的 所 有 关于 随机 变量 的 蒜 的 结果 均 可 以 推广 到 关于 增 o 域 的 鞭 
上 , 只 需 在 形式 上 作 些 改变 . 例如 , 我 们 一 旦 引进 关于 o 域 族 的 马尔 可 夫 时 间 的 定 
义 , 可 选 抽样 定理 以 及 靳 的 收敛 定理 都 仍然 成 立 . 我 们 将 不 再 重 述 全 部 结果 , 仅 叙 
述 关 于 蔷 的 一 些 结果 , 这 主要 在 教学 上 有 助 于 我 们 熟练 地 运用 关于 o 域 的 条 件 期 望 
性 质 . 

命题 7.1 ” 设 {Xn} 是 关于 {F} 的 鞭 . 则 对 于 所 有 的 mw, E[Xn] = E[Xol. 
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证 明 应 用 全 概率 公式 (7.13) 于 拷 等 式 X， = E[Xn+1|Fnj, 我 们 得 到 
ElXn] = E{ElXn+1lFn)} = ElXnt+l. 
使 用 归纳 法 即 可 完成 证 明 . 国 
命题 7.2 ” 设 {Xn} 是 关于 {Fn} 的 靳 , 如 果 2 是 有 界 Fn 可 测 随 机 变量 , 则 
El[ZXn4r|fFn| = ZXn, n=0,1,...;k21. 


证 明 我们 使 用 性 质 (7.9), 对 于 有 界 天 可 测 的 Z, 有 


E[ZXnir|Fn] = [XI (7.15) 
再 根据 (7.12), 得 
El[Xn+k|fFn] = E{ElXn+rl Fnte = 五 [XI Fn]， 
利用 归纳 法 易 得 
五 [Xml = 五 + = Xn, 
由 此 结果 与 (7.15) 即 得 结论 . 天 


事件 { 人 = n} 属于 万 . 由 于 每 个 随机 变量 都 是 定义 在 样本 空间 0 上 的 函数 , 这 样 ， 
我 们 要 求 


{2 :T(w)=n}e€E 碑 ， 对 于 所 有 的 n. (7.16) 
由 于 每 个 万 , 是 一 个 o 域 并 且 对 于 所 有 的 n 有 5 C Fat. 式 (7.16) 等 价 于 

{w:T(w) < n}e Fn， 对 于 所 有 的 m， (7.17) 
或 

{e :Twol)>me 万 ， 对 于 所 有 的 n. (7.18) 


例如 , 为 从 (7.16) 推 得 (7.17), 注意 


{wo :Tw) < n}= (J{w :Tw)=&}. 


天 一 0 


由 于 每 个 {ww : T(w) = 有 € KC 万 ,所 以 其 并 集 属 于 万 , 因此 满足 (7.17). 
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等 价 地 , 我 们 也 可 要 求 每 个 示 性 函数 


”f/f: 如 果 了 = 
|, 如 果 了 天 mm 


是 关于 万 可 测 的 . 
如 果 fn 一 (Yo, 了 yn) 是 由 随机 变量 组 Yo Y1,.…, Yn 产生 的 Uo 域 ， 则 
FT=n 关于 Fw 可 测 当 且 仅 当 


{T=n} 一 gn( Yo, “"", 了 )， 


其 中 ga(，……，) 是 某 个 适当 的 可 测 函 数 . 这 样 , 后 面 马尔 可 夫 时 间 的 定义 是 早先 定 
义 的 推广 . 

每 个 常数 工 =n 是 马尔 可 夫 时 间 . 如 果 工 和 5 是 马尔 可 夫 时 间 , T+S,TAS = 
min{T,S} 和 了 V5 = max{T,S} 也 是 马尔 可 夫 时 间 . 例如 , 为 证 明 TT 入 5 是 马尔 可 
夫 时 间 , 我 们 有 


{2 :TAS>n}={w:T>n}f No:5 >n} eA 


5| 理 7.1 设 {Xn} 是 拷 , 7 是 关于 {7Fn) 的 马尔 可 夫 时 间 ， 则 对 于 所 有 的 
n 之 k, 有 


E[Xnlr-py] = 五 LXTA] 
(I{:} 是 由 {:} 所 描述 事件 的 示 性 函数 .) 
证 明 ”我们 利用 事实 : Tz-k} 是 及 可 测 的 , 则 


E[Xnlr=k}]= EB{E[XnlTtr=ky|Fx]} ”( 由 大 数 定律 ) 
= EIXkI(T=k}]. 


鉴于 上 述 . 关于 o 域 族 的 拷 的 研究 完全 平行 于 6.1~6.6 节 所 进行 的 讨论 . 例如 ， 
我 们 有 下 面 引 理 : 
5 理 7.2 设 {Xn} 是 园 . 工 是 关于 {三 ,} 的 马尔 可 夫 时 间 ， 则 对 于 所 有 的 
1 二 0, |， “1 
E|Xol 一 五 |[XTAn| 一 E[Xnl. 
证 明 如 在 引 理 3.2 所 做 的 那样 , 根据 引 理 7.1, 在 细节 上 做 些 适 当 修改 即 可 得 
| 
关于 上 穿 不 等 式 、 最 大 值 不 等 式 、 可 选 抽 样 定理 以 及 团 的 收敛 定理 , 均 可 由 引 
理 7.2 推 得 , 正如 我 们 前 面 从 引 理 3.2 所 导出 的 一 样 , 下 面 我 们 举 一 个 例子 . 


证 
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例 ” 设 {Yh} 是 定义 在 某 概率 空间 (0, 下 , P) 上 的 随机 变量 序列 , 并 且 对 于 每 
个 呈 令 万 是 由 (加 了 丈 ) 产 生 的 o 域 . 如 果 2 满足 五 [12| ] < co, 我 们 在 6.1 节 
例 (k) 中 指出 了 
Xn 一 五 [2 n= 0,1,..., 


构成 一 个 欢 , 并 且 在 6.6 节 例 (f) 我 们 验 知 这 是 一 致 可 积 缺 . 由 鞍 收 敛 定理 知 极限 
nn To 
以 概率 1 存在 , 并 且 成 立 
jim E[|Xn 一 Xl|]=0. 
我 们 提 到 过 Xoo 可 以 表示 为 
Xo = ElZ|Yo, Yi,:1. 


坷 把 上 式 右边 部 分 解释 为 Z 在 条 件 分 布下 的 期 前 则 是 比较 困难 的 . 然而 , 如 果 我 们 


Xo = ElZIFool. 


依照 定义 7.1, 我 们 首先 需要 证 明 Xo 是 可 测 的 , 然后 对 每 个 有 界 Fo 可 测 随机 
变量 W, 证 明 等 式 
El[XooW] = E[ZW!]. (7.19) 


每 个 XX 是 三. 可 测 的 , 因此 是 可 测 的 , 因为 对 于 所 有 的 n,n C Fw. 由 此 推 得 
Xo = lim Xn 是 Feo 可 测 的 . 从 另外 一 个 观点 看 , 由 于 每 个 Xn = E[Z|Yo,:…,Y] 
是 Yo0,… ,的 函数 , 所 以 Xo = Jim 从 mn 是 整个 序列 如 ,五 的 一 个 适当 可 测 
函数 , 因此 关于 Fo 可 测 . 

为 证 明 (7.19), 只 要 考虑 任 一 有 界 Fn 可 测 函 数 Wm 即 可 , 其 中 m 是 任意 正 整 
数 . 让 m 增加 , 用 随机 变量 Wi 有 逼近 和 -可 测 函 数 W, 便 可 推 得 一 般 情形 . 但 是 , 当 
Wm 是 万 "可 测 时 ， 


ElXn Wm|= E{E[lZ|Fn | Wm} 
= E{EIZWm|Fn)}, 如 果 n 宕 mm 
(因为 Wm 是 Fm C 万 可 测 的 ) 
= ElZ Wm (由 全 概率 公式 ) 
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关于 n 取 极 限 , 得 
E[XooWm] = lim ELXnWm] = ElZWm), 


因此 (7.19) 得 证 
我 们 先 来 说 明 另外 一 个 重要 事实 . 由 于 Xo。 = lim X 是 Fo 可 测 的 , 我 们 从 
(7.11) 知道 
Xo = E[Xol|Fol. 


而 另 一 方面 , 我 们 刚刚 验证 了 表达 式 
XX 一 五 Ze 
根据 性 质 (7.12) 和 FF C wo, 我们 有 


一 E{E[lZ|f wl),} 
一 五 | 万 | 


即 ，Xn = [Xela] 其 中 Xoo = lim Xn. 这 个 事实 对 于 每 个 一 臻 可 积 鞭 都 成 立 ， 
我 们 写成 如 下 的 引 理 
引 理 7.3 。” 设 {Xn} 是 关于 {F] 的 一 致 可 积 献 ( 见 6.3 节 ), 则 


Xn = E[XowlF,), 
其 中 
Xw 一 im 入 ,. 
证 明 ” 蔷 收敛 定理 保证 极限 Xs。 lim Xn 以 概率 1 存在 并 且 成 立 


lim E[|X, — Xoo|]=0. (7.20) 


现在 我 们 证 明 X， 具有 EIXoolFa] 按 定义 7.1 所 要 求 的 三 个 性 质 . 首先 , 由 于 {Xn] 
是 鞭 , 因此 X 是 Fs 可 测 的 . 令 W 是 有 界 万 , 可 测 随机 变量 , 则 
EIXoW]= El lm XmW] 
= lim_E[XmW] (极限 与 期 望 交换 的 验证 在 下 面 ) 
= EIXnW]. 
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即 X = EI[Xoo|Fnl. 极限 号 交换 的 台 理 性 依据 是 (7.20) 和 不 等 式 


IE[XoW] — E[XnW]|< E[ |XooW — Xn WI 
< AE| [Xn Xoo| ]， 


其 中 |W| < 4, 4 < oo. 引 理 证 举 . 二 
我 们 已 经 建立 了 重要 结果 , 即 每 个 一 致 可 积 蒜 {Xn} 具有 Doob 过 程 X,，= 
ElZIF,) 的 形式 ， 其 中 4 二 Xo = im 入 mm 


应 用 于 数学 分 析 
设 f 是 在 [0,1] 上 实 值 函数 , 是 是 利 普 希 欧 连 续 的 . 即 f 满足 
f(z) 一 fy) < Clz 一 yl， ”对 于 所 有 的 x,y € [0,1]， 
其 中 C < oo 是 常数 . 对 于 n= 1,2,… 记 Pn 是 由 下 面 给 出 的 [0, 1) 的 分 割 : 
Pp, = {[k/2", [k++ 1)/2"); k=0,1,...,2"— 1). 


而 所 是 由 $,9 = 10,1) 和 Po 中 集合 的 并 集 构成 的 o 域 
设 Z 在 [0,1) 上 具有 均匀 分 布 , 并 定义 随机 变量 序列 


Xn = 2°{f(k/2") — f((k — 1)/2")}, 
如 果 (k 一 1)/2" < 2Z <k/27 
则 {Xn} 是 关于 {rn} 的 拷 . 事实 上 , 万 是 由 Yo, 关 ,… ,Yn 产生 的 o 域 , 其 中 
Y= k/2", Bh/2" < 2 < (k++1)/2", 


我 们 在 6.1 市 例 (1) 中 已 验证 了 它 是 一 个 拷 
注意 到 X 近似 地 是 f 在 (随机 选择 的 ) 点 2 上 的 导数 . 当然 , f 可 以 是 不 可 微 
的 , 但 却 是 利 普 希 茨 连续 的 , 对 于 所 有 的 n, |Xn| < C, 因此 {X。} 是 一 致 可 积 的 , 故 


太一 mn 及 
对 于 Z e [0,1) 的 具有 概率 1 的 集合 存在 . 由 引 理 7.3, 我 们 有 
Xn = E[Xo|F,l. (7.21) 


显然 , X。 是 随机 变量 2Z 的 某 个 函数 g, 记 为 Xoo = g(2). 
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取 B = [0,k/27) e 万 , 则 由 (7.210) 有 


El[Xnlp]= f(k/2") — f(0) 
= E[XoIB|] 


k/2" 
= | g(x)dz. 
0 


对 任意 z & [0,1) 可 用 一 个 二 进位 有 理 数 序列 收敛 于 它 . 在 上 式 中 按 此 序列 取 极 限 ， 
得 


f(z) ~ f(0) = / gzjdz 
在 这 个 意义 下 , 9 是 f 的 导数 , 这 就 是 所 谓 拉 东 - 尼古丁 导数 


6.8 ”其 他 类 型 的 款 


蔷 的 概念 仅 要 求 过 程 {X(t);te T} 的 指标 集 工 具有 某 种 顺序 结构 . 特别 , 工 可 
以 是 实 直线 上 任意 子 集 . 

定义 8.1 设 了 是 (-oo,+oco) 中 的 一 个 子 集 , 令 {X iteT} 是 定义 在 概率 
空间 (0, 了 下, P) 上 的 随机 过 程 . 对 于 每 个 ieT, 假设 五 是 大 的 子 c 域 并 且 


Fi C £,, 如 果 t < s,t,s ET. 


称 {X(t)} 为 关于 {五 } 的 下 轩 , 如 果 对 于 所 有 的 te 有 

(1) X(t) 是 瑟 可 测 的 ， 

(i) E[X(t)*] < co, 并 且 

(ii) E[X(t +u)F] X(t), uv>0,t+ueT. 
此 外 , 如 果 {一 X( 引 } 是 下 黄 则 称 {X(} 为 上 岗 . 若 {X()} 既是 下 轩 又 是 上 鞭 ， 则 
称 为 蒜 


指标 工 通 党 有 下 面 几 种 情况 ; 
T={:.……,—2,—1,0}, 负 整 数 集合 ， 
T = { 人 ,一 0,1 小 所 有 整数 集合 ， 
太一 10， 00)， 正 实 直线 ， 
T = (一 co 00), 实 直 线 ， 

甚至 


T=Q, 有 理 数 集合 . 
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反 回 鞭 


设 {Xn;n=0, 一 1, 一 2,…} 是 关于 {Fn;n = 0 一 1 一 2 的 下 圾 . 作为 具体 例 
子 , 可 以 假设 大, 蚌 二 证 机 克 生 到 {Yr 了 rw-1, Yn-2,…} 产生 的 o 域 . 当然 也 可 能 
是 其 他 情况 . 

引 理 5.1 的 最 大 值 不 等 式 变 为 


APr{ max Xk > 和! < ElXol, A>0, (8.1) 


其 中 假设 每 个 X > 0, 并 且 因 右边 部 分 与 n 无 关 , 故 
APr{ Sup Axk> 》} < 五 |Xo]， A > (0. 
jb 和 0 


我 们 发 现 6.4 市 的 上 穿 不 等 式 (4.11) 也 可 作 同 样 的 改进 . 已 知 实数 a < ”和 负 整数 
NN, 定义 Va,s(N) 是 满足 下 列 条 件 的 数 对 (i,j) 的 数目 : 入 < i < 7 < 0, 并 且 不 等 式 
Xi<a,a< Xr <bi<k<I) 及 X; 之 bb 成 并 , 即 Vp(N) 表示 当 N<ng0 时 XXX， 
上 穿 区 间 (a,8) 的 次 数 , n 是 从 NN 到 0. 则 由 不 等 式 (4.11) 有 
El[Vo,s(N)] 
< (b—a) {El((Xo —a)t] ~ E[(XN — a)+]} 
< (b—a)- El(Xo ~ a)t]. 


由 于 右 端 不 取决 于 N, 所 以 
E[lVas] < (b — a)™ E[(Xo — a)!], 
其 中 Vo = Vaio( 一 00) 是 对 于 所 有 的 ni < 0, Xn 上 穿 (a,b) 的 次 数 . 
作为 这 些 加 强 不 等 式 的 推论 , 指标 集 为 {-…, 一 2, 一 1,0} 的 著 当 n 一 一 00 时 总 


有 极限 ; 不 需要 附加 假设 ， 
X-wo = lim Xn. 


以 概率 1 存在 . 除 此 以 外 , 我 们 甚至 可 以 得 到 更 多 的 结果 . 如 果 {Xn;n = 0, 一 1, -2 …} 
是 一 个 著 , { |Xn| } 是 下 转 , 且 由 (8.1) 


314 Pr{W > A 0， 当 和 A 一 0%， 


其 中 W = sup|Xn|. 利用 下 拣 性 质 , 对 任何 可 测 的 事件 4。 有 E[ |Xnl1(4n) ] < 
E| |XolI(4;) ], 因此 我 们 得 到 


sup El [XnlT{ [Xn| > c+}] 
< sup | Xoll{ |Xn| >c1}| 
< E[ |XolI{W > c} |. 
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同等 式 (6.8) 一 样 的 理由 可 证 明 最 后 一 项 当 c 一 oo 时 趋 于 0. 于 是 , 拷 {Xn;n = 
0, 一 1, 一 2,…-} 是 一 致 可 积 的 , 并 且 


lim 五 | |Xn 一 天 -| = 0. 
C—O 


目 然 , 这 个 推理 可 以 马上 应 用 于 以 所 有 整数 为 指标 集 的 园 


{Xn;n = ,1,0,+1,.…}. 
对 于 这 样 的 拷 . 
发 _oo 一 lim An 
始终 存在 , 并 且 有 
El| [Xn 一 oo| | — 0, 当 n 一 一 co 时 ， 
久 


五 [人 -oo 一 E[Xn 一 E[Xoj, 对 于 所 有 的 n. 
与 此 形成 鲜明 对 比 的 是 , 基本 加 收敛 定理 需要 附加 一 些 条 件 , 例如 


sup E[X+] < oo， 
nn 之 0 


本 质 上 是 为 了 保证 极限 


及 十 co 一 ,im 及 nn 


存在 , 而 要 保证 等 式 
B[X+] = E[Xo 
成 立 甚至 需要 更 多 的 假设 , 比如 , 序列 {Xnin > 0} 是 一 致 可 积 的 
设 {Zn;n = 0,1,…} 是 概率 空间 (Q, 天 , P) 上 的 随机 变量 序列 , 并 令 {9n;n = 
0,1,…} 是 下 的 子 o 域 的 递减 序列 , 即 


丰 D9D91， 对 于 所 有 的 n. 


称 {Zn} 为 关于 {9%} 的 反 向 拷 , 如 果 对 于 n = 0, 1,… 
(i) 2 是 9 可 测 的 ， 
(iD EL |Zn|] < co, 且 
(iii) E[Zn|Gn+13] = Znt1. 
这 样 , {2Z} 是 反问 团 , 当 且 仅 当 


Xn 一 Ln, n= 0,~—1,—2,.… 
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构成 一 个 关于 Fn 一 VY-_n;n 一 0, 一 | 一 2， “0? 的 拷 . 
根据 我 们 前 面 的 讨论 , 下 面 反 向 鞠 收 敛 定理 成 江 . 
定理 8.1 设 {Zn} 关于 o 域 递减 序列 {9n} 是 反 向 蒜 . 则 以 概率 1 存在 


2 = im, Zn 
并 且 
lim El|Z -Zn|]= 
以 及 
El2。] = E[2]， ”对 于 所 有 的 n 成 立 


A = EBE[Xi], So = 0, 当 n> 1 时 部 分 和 55 = 和 十 十 令 9 是 由 {Sn, Sn+r1,…} 
产生 的 o 域 . 我 们 利用 反 辐 蔷 理论 导出 强大 数 定律 , 注意 到 


Zn=n ls, (2Z0=1) 


构成 一 个 关于 9n 的 反 四 钢 . 很 清楚 , E| |Zn| 1 < oo, 并 且 Zn 是 9n 可 测 的 . 
我 们 从 显然 的 恒等式 出 发 : 


Sn = ElSn,|S,,, Snt+i, “° | 
= 》 EIXk|On] 


k=1 
= nE[Xk|Gn| l<k<n, 


最 后 一 个 等 号 用 到 了 被 加 项 的 对 称 性 . 把 上 述 关 系 式 写 成 如 下 形式 比较 方便 : 
忆 [Xk9] = nS, = Zn,, il<k<n. 


由 此 推 得 
ElZn-1lGn]= (n ~ 1)- Blsn- 1|Gn 
(n — 1)- 1 5 [XilG,] 
k=1 
= Zn. 

这 就 验证 了 反 向 拷 的 性 质 . 注 : 为 使 {Zn} 是 反 疝 驶 并 不 需要 整个 的 独立 性 . 一 
个 比较 弱 的 充分 条 件 是 Ce 是 可 交换 (也 称 为 对 称 ) 的 随机 变量 序列 , 这 意味 着 
(X1,…,Xn) 与 (Xo(1),…,Xotn)) 对 于 每 个 自然 数 ”具有 相同 的 联 全 分 布 ， 其 中 
(coco)) 是 (1,… n) 的 任意 一 个 置换 .] 
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应 用 反问 园 的 收敛 定理 , 我 们 得 到 
2 = lim Zn 以 概率 1 存在， 
当 征 E[2Z] = E[Zr] = k. 为 了 得 到 2 是 非 随机 的 , Xi 关 2,… 的 独立 性 是 极为 重要 
的 . 事实 上 , Z 三 人 证 明 如 下 . 对 任何 mm = 1,2,:…， 
7 Tin Am+t Amtit Anim 


TO it 


因为 有 限 项 数 的 任意 性 并 不 影响 极限 ， 由 此 推 得 , 对 任何 有 限 数 m,2 和 Zr = 
m-1Sw 是 独立 的 , 因此 对 任意 实数 a 


Pr{Z >aH Zh > a}= Pr{Z > a}Pr{Zm > a}, 
之 之 01 二 
Pr{Z 之 a ax Zr 之 a} = 二 Pr{iZ> a}Pr{ max, Zr 之 ah 


并 且 
Pr{Z >a 昌 jimnsup2 > a} 
= Pr{Z > ajPrflim sup Zn, > a}. 


但 2Z = lim Zn = lim sup Zn, 所 以 
Pr{2Z > a} = {Pr{2Z > oj 


由 此 推 得 对 每 个 实数 a, Pr{2 > a} 只 能 取 值 0 或 1, 并 且 这 个 性 质 强 涵 荐 2 是 党 
数 (为 什么 ? ). 此 外 , 考虑 到 E[2] = p, 则 2Z 的 常数 值 一 定 是 py. 这 样 我 们 就 证 明了 
强大 数 定 理 ; 


dn Sn =h 
以 概率 1 成 立 . 
连续 参数 甘 
设 { 久 ( 引 ;t > 0} 是 概率 空间 (0, 下, P) 上 的 连续 参数 随机 过 程 . 对 于 每 个 t > 0， 
令 石 是 大 的 子 c 域 ,并 且 
fF CA, 如 果 s <+t. 


在 区 间 [0, oo] 上 取 值 的 随机 变量 了 称 为 关于 {4} 的 马尔 可 夫 时 间 , 如果 对 每 个 
t 之 0, 事件 {了 < 如 属于 天, 我们 可 以 把 天 看 作 至 时 刻 t 为止 得 到 的 信息 . 从 这 个 
观点 讲 , 马尔 可 夫 时 间 小 于 或 等 于 t 的 事件 可 由 至 时 刻 t 为 止 得 到 的 信息 完全 确定 . 
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由 于 每 个 o 域 包括 它 的 任 一 集合 的 余 集 , 所 以 一 个 等 价 条 件 是 
人 > 寺 E 万 ， 对 于 所 有 的 t > 0. (8.2) 


对 于 连续 参数 过 程 , 只 要 求 对 每 个 t, {了 = t} 是 三: 中 的 事件 是 不 够 的 . 然而 , 同 前 
面 一 样 , 每 个 常数 时 间 工 = 7 是 马尔 可 夫 时 间 , 并 且 如 果 3 和 了 是 马尔 可 夫 时 间 ， 


S+T, SAT=min{$,T} 和 SVT= max{S,T}. 


也 都 是 马尔 可 夫 时 间 . 这 样 , 如 果 工 是 马尔 可 夫 时 间 , TT 人 t = min{T,} 对 每 个 固定 
t > 0 也 是 马尔 可 夫 时 间 . 
马尔 可 夫 时 间 最 重要 的 一 个 例子 是 过 程 首次 到 达 水 平 a 的 时 间 了 Ta, 即 


T, = inf{t > 0; X(t) > a}. 


现在 我 们 假设 每 条 轨道 X(t) 是 t 的 连续 函数 , 例如 , 当 X(t) 是 布朗 运动 时 , 就 是 这 
种 情况 . 令 瑟 = 下 (X(s);0 < s < 如是 由 {X(s);0 < s < 妇 生成 的 o 域 . 则 每 个 
X(s) 是 天 可 测 的 并 且 对 于 s < 也 FF C 厂 . 这 时 , Ts 是 关于 {三 } 的 马尔 可 夫 时 
间 . 为 了 证 明 (8.2), 注意 到 X(t) 是 连续 的 , {T > 甘 这 个 事件 的 发 生 等 价 于 对 于 某 
个 上 一 1,2,…, 事件 { aia,(a 一 站 (W)) > 1/k} 发 生 , 再 一 次 利用 连续 性 , 等 价 于 对 


每 个 有 理 数 7,0 <r < 事件 {(a 一 X(7)) > 1/k} 同时 发 生 . 即 


{T>#}=() f) {(a—X(")) > 1/k}. 


k= 二 1 Or t 


7 有 理 数 


当 7 < tt 时 , 每 个 事件 {(a 一 XX(7)) > 1/k} € 大. 因为 五 是 o 域 ,并 且 [0, 引 中 的 有 
理 数 7 是 可 数 的 , 所 以 


门 {(a— X(r)) 2 1/k} € F. 
Oret 
再 者 , 五 中 可 数 多 集合 的 并 集 仍然 属于 五 , 因此 { > 甘 五, 这 正 是 要 证 明 的 . 
设 4 是 闭 集 , 定义 4 的 初 遇 时 (4) 为 


T(A) = inf{t > 0; X(t) € A}. 


同时 可 证 T(4) 是 关于 所 = 下 (X(w);0 < w < 避 的 马尔 可 夫 时 间 , 只 要 X(t) 是 连 
续 苞 数 

不 幸 的 是 , 由 于 一 些 技 术 上 的 原因 , 如 果 X(t) 不 是 连续 的 或 4 不 是 闭 的 , 集合 
4 的 初 遇 时 不 一 定 是 关于 {ti} 的 马尔 可 夫 时 间 . 然而 , 我 们 有 可 能 通过 扩大 o 域 
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五 来 到 服 这 个 缺点 . 假设 每 一 个 实现 X(t) 作为 上 的 函数 是 从 右边 连续 的 并 且 具 有 
左 极限 . 即 , 假设 


X(t)=limX(s)， 对 于 所 有 的 二 > 0， 
和 
X(t-) 二 lpX(s)， ”对 于 所 有 的 t> 0 存在 . 


依然 是 疡 = 下 (X(4);0 < wv < 令 + 是 由 同时 属于 每 一 个 o 域 万 +e 的 事件 组 
成 的 , 其 中 ss > 0 是 任意 的 . 用 集合 论语 言 来 表示 , 万 + 就 是 交集 


t+ 一 个 fire. 


E>0 
Fi+ 是 一 个 o 域 ,X 昌 是 万 + 可 测 的 , 并 且 
F 记 CCF 六 + 如 果 s<t 
最 后 , 令 + 表示 包含 万 + 的 每 个 集合 和 Q 中 4eF 的 一 切 子 集 的 最 小 o 域 , 这 


里 P[4] = 0. 粗略 地 说 , 态 + 是 由 所 有 那些 与 五 + 中 事件 概率 等 价 的 事件 组 成 
这 样 , 对 于 每 个 Borel 集 4, 初 遇 时 


r-| inf{t >0:X(tj eA}， 如果 X(De4 对 某 个 上 > 0， 
人 oo 如 果 X(i) #4 4 对 于 所 有 的 
是 关于 { 瑟 +} 的 马尔 可 夫 时 间 


关于 著 的 可 选 抽 样 定理 和 收敛 定理 在 连续 时 间 情 况 仍 是 正确 的 . 如 果 {X(t);t > 
0} 是 关于 {天 } 的 下 款 , 则 对 于 所 有 的 马尔 可 夫 时 间 了 


EIX(0) < EI[IX(TAt)] < EIX(t)], tt>0. (8.3) 
对 于 上 团 的 情况 , 上 述 不 等 号 是 相反 的 , 对 于 团 的 情况 , 上 述 等 号 成 立 . 如 果 Pr{T < 


0} = 了 风 
X(TAt) —=» X(T), 当世 一 co. 


如 果 我 们 能 验证 此 极限 与 期 望 在 (8.3) 中 可 交换 , 便 可 推 得 可 选 抽样 定理 . 
定理 8.2 设 {X(t);t > 0} 是 下 载 , T 是 关于 {F] 的 马尔 可 夫 时 间 ， 如 果 
Pr{T < o0} = 1 并 且 随 机 变量 {X(t 入 T)T;t > 0} 是 一 致 可 积 的 , 则 


E[X(0)] < EI[X(T). 


推论 8.1 设 {XX();t > 0} 是 鞭 , 而 了 是 马尔 可 夫 时 间 , 如 果 Pr{T < coy = 1 
并 且 Elsup X(t)|] < oo, 则 


E[X(0)] = EIX(T)). 
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在 第 7 章 我 们 将 利用 这 些 结果 导出 布朗 运动 的 奉 干 重要 性 质 . 如 有 果 {X(t);t > 
0} 是 布朗 运动 过 程 , 其 均值 为 0, 方差 为 o*, 则 下 面 三 个 过 程 

(i) X(t), 

(ii) Y(t) = Xt) — ot, 

(iii) Z(t) = exp{0X(t) — >02024]， 6 为 实数 ， 
都 是 关于 五 = 下 (X(w);0 < w < 的 观 . 这 将 在 7.5 节 证 明 . 在 那里 , 这 些 拷 将 被 用 
来 计算 与 布 度 运动 相 联 系 的 大 干 重要 的 量 . 

可 以 证 明 (但 证 明 相当 困难 ) 对 于 实数 9 和 具有 一 阶 、 二 阶 连续 导数 的 严格 增 
溺 数 f, 假如 我 们 规定 BIW(t)] < co, 则 


og t 
W(t) = exp (or -| {Pr CO) + 91" [x(a | 


是 一 个 加 
泊 松 过 程 
如 果 { 关 (t);t > 0} 是 具有 参数 和 \ 的 泪 松 过 程 , 则 
Y(t) = X(t)— Xt, (8.4) 
U(t) = Y*(t) -Xt, (8.5) 
各 
V(t) = exp{—0X(t)+ M(l ~-e )}, -oo<0<oo， (8.6) 


是 关于 天 = 下 (X(w);0 < wv < 的 堵 . 

固定 一 个 正 整 数 a, 并 令 是 X(t) 首次 达到 a 的 时 间 . 假设 X(0) = 0 并 注 
意 到 多 (T,) = a( 因为 泊 松 过 程 的 变化 是 每 次 跳跃 一 个 单位 ), 应 用 可 选 抽样 定理 于 
(8.4)~ (8.6), 我 们 得 到 a = 和 AE[Toj， 


El(a 一 和 AT)?] = AE[T] = a 或 方差 VarlTs] = oa/ 和， 
以 及 
ee = Elexp{—PTa})) 
或 


Elexp{—BTa}| = (3) 


其 中 8 = -AL -ee-9). 最 后 的 表达 式 是 T 分 布 的 拉 普 拉 斯 变换 . 正如 我 们 已 经 知 
道 的 , 它 证 明了 Ts 具有 参数 为 a 和 和 的 工分 布 . 


6.8 其 他 类 型 的 蒜 ”287 


纯 生 过 程 


若 {X(t);t 之 0} 是 具有 增长 参数 A(i) > 0 (>0) 的 纯 生 过 程 . 为 方便 起 见 设 
X(0) = 0. 我 们 断言 
Y 人 的 =XO- 人 AKColdu 
0 


和 , 
V(t) = exp{OX(t) + [1 — ef / MX (wu)ldu} (8.7) 


都 是 拷 , 其 中 0 是 固定 的 , 假如 它们 的 期 望都 是 有 限 的 . 有 许多 方法 可 以 验证 这 些 结 
论 . 最 好 的 方法 是 把 该 问题 化 为 关于 泊 松 过 程 的 相应 问题 . 

令 70,7n1,'… 表示 在 给 定 过 程 中 相继 两 个 增殖 的 间隔 时 间 . 7; 是 独立 的 , 并 且 六 
具有 参数 为 和 (k) 的 指数 分 布 . 随机 变量 ok = 和 (Kk)7k,k = 0,1,… 仍然 是 独立 的 . 此 
外 还 具有 参数 为 1 的 共同 指数 分 布 . 它们 可 以 作为 标准 泊 松 过 程 {N(t);t > 0} 中 
的 间隔 时 间 . X(t) 和 N(t) 之 则 的 关系 可 以 用 图 6-1 解释 

由 前 所 述 


W(T)= exp{0N(T)+T(1~e)}, T¥0 


全 (站 


7 = J MX(s)) ds 
图 6-1 所 有 间隔 时 间 ok = 入 (k)7x 的 均值 都 为 1, 因此 定义 了 一 个 当 松 过 程 


| 
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是 关于 97 = 下 (N(w);0 < wu < 了) 的 鞭 . 于 是 , 对 于 了 > 9， 
EIW(T)IN(WwW;O0 < ug 5) = W(S). 
固定 点 t+ 并 令 了 = T(t) 是 TT 坐标 轴 上 的 对 应 点 . 其 关系 是 
T = T(t)= / AX (ladu, (8.8) 
且 


N(T) = X(t). (8.9) 
圈定 点 s < 并 令 5 = S(s) 以 类 似 方式 对 应 于 它 . 关于 {N(w);0 < wu < 5} 的 条 件 
与 关于 { 针 (w);0 < w < s} 的 条 件 是 等 价 的 . 这 样 ， 

EIW(T)IX(Ww;0 < u < sl= W(S). (8.10) 
但 是 通过 替换 (8.8) 和 (8.9), 我 们 记 W(T) = V(t) 和 W(5) =V(s). 这 样 ， 
EIV(t)|Fs] = V(s) 


其 中 ,= 下 (X(w);0 < wu < s), 因此 {V(t)} 是 一 个 园 

细心 的 读者 会 注意 到 我 们 讨论 中 的 一 个 漏洞 , 对 固定 的 t,T = T(t) 不 是 固 宋 
的 , 而 是 随机 的 . 但 是 了 是 关于 {97} 的 马尔 可 夫 时 间 , 所 以 应 用 可 选 抽样 定理 的 推 
广 即 可 验证 (8.10). 


t 
形式 上 , 我 们 可 以 证 明 Y(t) = X(t) - / AX (wjdu 是 一 个 对 , 这 只 要 对 下 式 
oIV(t) — 1 = Y(t) +0(0) 
今 9 趋 于 0 即 得 到 , 其 中 o(9) 是 (随机 ) 余 项 , 左边 部 分 对 每 个 9 关 0 都 是 鞭 , 因此 
Y(t) 也 是 一 个 蒜 . 
生 灭 过 程 


设 {X(t);t > 0} 是 生 灭 过 程 , 其 增长 参数 为 和 ; = 和 (ij)， i > 0, 消亡 参数 为 
pi == J( 引 ,i 之 1. 假设 和 (0) = 0, 所 以 0 是 吸收 状态 , 但 对 于 i 1, 假设 和 (让 > 0. 定 


f{0) = 0, f(1)=1, 
MH 4 H 
. Hl 1H2 1 /1-1 ， 
一 1 上 + 一 十 … :十 一 -一 一 一 ,对 ) > 2. 8.11 
f() =1+ + NAX 7 (8.11) 
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那么 Z(t) = JILX 芍 ] 是 一 个 蔷 , 只 要 它 的 均值 是 有 限 的 . ( 试 与 初等 问题 25 比较 .) 为 
此 , 固定 s < 上 和 某 状态 i> 1, 并 考虑 


gi(t)= EIZ(t)|X(u);0 < vu < s,X(s)=14 
= ElZ(t)|X(s) = 


最 后 这 个 等 式 由 马尔 可 夫 性 推 得 . 那么 , 对 于 较 小 的 h > 0, 通过 考虑 在 时 间 区 间 
(t,t 二 hh) 内 可 能 出 现 的 转移 , 我 们 得 到 等 式 
gi(t+h)= > ElZ(t + h)|X(t) = kJPr{X(t) = kX(s) = 
此 一 0 
= gi(t) +h > {Mlf (E+1) — fk)] — prlf(k) — fk ~ 1))}: 
二 0 

Pr{X(t) = kX(s) = i} + o(h). 
这 样 
gi(t+h)— gi(t) 
1 h 
= > Melf(k+1)— fk)] — pr[f(k) — f(k— DPr{X(t) = kX(s) = 


k=0 
= 5 {% 有 Re - | — jk [| \pr{ X(t) =kIX(s) = 
k=0 


一 (0 


9i(t) = lim 


由 于 gi(t) = 0, gi:(t) = E[Z(t)|X(s) = 计 对 于 上 > s 是 上 的 常数 函数 , 令 上 | s, 我 们 得 
到 
gi(5)= 互 [ZI(s)|X(s) = 
= gi(t) = E[Z(t)|X(s) = 1], 

即 Z(t) 是 一 个 辕 . 

固定 状态 i < mm 并 令 v(i) 是 在 条 件 X(0) = i 下 过 程 到 达 状 态 mm 之 前 被 0 状 
态 吸 收 的 概率 . 令 

Tom = inf{t >0:X(t)=0 或 X(t) = m}. 
应 用 可 选 抽样 定理 , 得 
f(i) = El[Z(To,m)] = v(i) :0+ {1 —v(i))f(m), 

因此 


fm) — fi) 


"全 一 一 
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其 中 f 如 (8.11) 定义 . 
这 里 , 由 不 同 的 方法 得 到 了 一 个 类 似 于 第 4 章 定 理 7.1 的 结果 . 
324 有 许多 与 生 灭 过 程 关联 的 讨 , 我 们 叙述 其 中 的 两 个 : 
(a) 设 g(i),i = 0,1 使 得 


Y(t) = glX(t)]-— / {MX (wg( Xu)+1)—g( Xu)) -plX (wg( Xu))—g( Xu)—1))}du 
的 期 望 是 有 限 的 , 则 {Y(t)} 是 一 个 拷 . 
注意 , 当 g(ij 是 
A(i)|g(i+ 1) — 9(i)] ~ p(i)lg(i) ~ g(i— 1)] 


的 解 时 , 上 述 积 分 可 以 大 大 简化 . 
(b) 设 g(),i = 0,1,… 使 得 对 于 某 个 固定 的 实数 0， 


V(t)= exp(—0g[X(t) 


1]， i 之 1 


t 
_ / ACX (Ww) {1 — e-olo(X +l) -g(x + 
D 
Lu(X(u)){l — etols(X()-g XD dv) 


的 期 望 是 有 限 的 , 则 {V(t)} 是 著 ， 


初等 问题 


1. 考虑 在 平面 第 一 象限 整数 格 点 上 的 随机 游 动 .如果 过 程 在 某 一 步 停 在 (mn), 则 下 
一 步 将 以 慨 率 > 转移 至 (m + 1,n) 或 (m,n 十 1) 设 过 程 从 (0,0) 出 发 ,T 是 第 一 象限 内 
联结 相 邻 格 点 (从 Y 轴 到 达 X 轴 ) 的 任意 一 条 曲线 ， 玉 和 世 分 别 表示 过 程 在 到 达 边 界 
之 前 向 右 和 向 上 的 步 数 , 试 证 明 EY; By, 图 6-2 撞 出 了 赐 线 的 一 个 例子 

类 示 : 利用 对 部 分 和 的 可 选 停止 定理 证 明 [V4] = ElY2] = 5E[T], 其 中 了 是 过 程 到 

325] 达 边界 工 所 需要 的 步 数 

2. 考虑 下 面 离散 时 间 马 尔 可 夫 过 程 , 其 状态 空间 为 单位 区 间 . 如 果 过 程 现在 位 于 p(0 < 
p < 1), 下 一 次 试验 它 将 以 概率 p 跳 到 a 十 Bp, 以 概率 1 一 p 跳 到 Bp, 其 中 a,B8 > 0, 且 
a 十 8 = 1. 用 公式 来 表达 此 过 程 是 


CG 十 DAn, 以 概率 Xn 
六 n+1 一 
BAXn, 以 概率 1 一 及， 


试 证 明 这 个 过 程 是 一 个 对 
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图 6-2 


3. 设 W(n) 是 带 有 迁 入 的 分 支 过 程 
WI(n+1)=Y,+ 和 nl 十 An2 十 … 十 入 mn 


其 中 Y 表示 第 n 代 的 迁 入 , Xi 表示 第 n 代 的 第 了 个体 后 代数 目 , 它们 都 相互 独立 . 假 
设 El[Yn) 二 入 和 E[X,,;] 二 m 天 1 证 明 


是 一 个 挝 . 

4. 设 某 群体 第 n 代 男 性 数目 为 XX，, 第 n 代 女 性 数目 是 .假定 男女 配对 是 稳定 
的 , 这 样 有 Zr = min{ Xn, Yn} 对 产生 后 代 ， 各 对 相互 独立 产生 后 代 并 都 有 相同 母 函 数 
g(t, s) = 长 s"], 其 中 & 表示 单独 一 对 双亲 所 具有 的 男性 后 代 的 数目 , ” 表示 单独 一 对 双 
亲 所 具有 的 女性 后 代 的 数目 . 证 明 , 铬 EE 所 1 或 En < 1, 则 {Zn} 是 一 个 上 球 . 

5. 假设 妆 , Y,… 是 独立 同 分 布 随 机 变量 序列 , Pr{Y i = 十 1} = p, Pr{Yi = 一 1} = 
gqg=1—p. 固定 正 整 数 a 和 b, 记 Do 二 0,Sn 二 并 十 … 十 ,nn 之 ] 今 

T= min{n: Sn, = —a 或 5% = 从. 
试 证 明 
EIT| = b a+b 1-(p/g) 


p~-g p—g 1—(p/q)te’ 3 天 人 


( 当 p=4 一 5 时 ，BE[Tj=ab 已 在 6.4 节 例 (a) 中 导出- 
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6. 设 六 ,了 3,… 是 独立 同 分 布 且 Prf = +1} = p,Pr{Y = 一 1}=g= 二 1 一 p. 假 


设 p>>>g: 置 S00 且 S4=Yi+…+Y(n 之 1) 对 某 个 固定 正 整 数 5, 令 


T= min{n :9n > b}. 
试 证 其 母 孙 数 为 


Els7] _ ( {1 4pgqs*}/? 


b 
， 0<s<l1. 
295 ) 


提示 : 利用 Wald 等 式 . 

7. 在 初等 问题 6 的 条 件 下 , 试 证 明 均 值 E[ 了 = 6/(p 一 9), 方差 Var[T| = bll1 一 (p 一 
q)*]/(p 一 9 

8. 设 Y(0),Y(1),… 是 成 功 游程 马尔 可 夫 链 , 其 中 Poo = 1, 因此 0 是 一 个 吸收 壁 ， 
有 目 Biti = 二 Pp, Ro = 二 9g=1 一 p,i 二 1,2,.…. 设 a 和 是 任意 常数 , 试 证 明 


2 b, 者 YY(n)=0， 
ap) +61 一 (1/p)”W7]， 若 Y(n)>0， 


是 一 个 占 . 
9. 考虑 随机 变量 族 {Xn}8, 其 中 每 个 随机 变量 绝对 值 的 期 户 是 有 限 的 , 并 且 满 足 关 
系 式 


E|[X,+1|Xo, X1, 四 ,大 六 一 QAXn 十 GXn-i,n > 0, 
其 中 @ > 0,8 > 0,Qa 十 8 = 1. 试 求 一 适当 值 a 使 得 序列 


Yh = aXn 二 Xn_i,n 之 1, Yo = Xo, 


10. 设 {Xn;n 之 0} 关于 {Yn} 是 一 个 堵 . 证 明 对 于 任何 满足 关系 式 有 上 和/ < m 的 正 
整数 集合 , 邦 XXm, 一 六! 避 Xk 是 无 天 的 , 即 


E[(Xm — Xi)Xk| = 0. 


提示 : 关于 条 件 Yi1, Y2， Ykx 求 期 望 . 
11. 设 {&} 是 这 样 一 个 随机 变量 序列 , 它 的 部 分 和 


An 一 5 十 SI 十 :十 6n， 7 之 二， 


构成 一 个 著 . 试 证 明 被 加 项 必定 互 不 相关 , 即 E[&i&j] = 0， i 关 
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12. 设 9 = Xi 十 … 十 Xn 是 一 个 鞠 , 目 对 于 所 有 的 大 满足 五 [X8 KK < oo. 试 
证 明 9 服从 弱 大 数 律 : 对 任 给 正 数 去 


Pr{lSn/n| > e} 一 0， 当 n 一 oo. 


提示 : 利用 最 大 值 不 等 式 和 初等 问题 11 的 正 交 性 结论 . 327 

13. 设 {&}%。 是 一 实 值 随机 变量 序列 , 满足 El&i|to,&1,…,&-1] = 0,1 = 1,2,.…. 
定义 » 

Xo = é0, Xnt1 = 》 itifi(é0,€1,., &i), 
i=0 

其 中 后 是 给 定 的 i 十 1 元 实 函 数 序列 . 试 证 明 {Xn} 构成 一 个 拷 . 

14. 考虑 重复 独立 地 抛掷 一 枚 均匀 硬币 的 赌博 , 其 中 任意 上 轮 的 结果 &x 满足 Pr{tx = 
1} = Priéx = —1} = 5 假如 一 个 赌 徒 在 第 一 输 中 下 赌注 一 个 单位 , 此 后 若 输 了 就 下 赌注 
所 输 的 一 倍 , 若 赢 了 就 下 赌注 一 个 单位 . 假设 赌 徒 有 无 限 财富 . 令 Xn 表示 在 第 n 输 之 后 
净 赢 得 数值 . 试 证 明 {Xm} 了 关于 {ttnj 是 一 个 园 . 

提示 : 对 适当 的 折 , Xn 可 表示 为 如 下 形式 


Xn 一 >》 Erfrlé1, , Ek—1)) 
k= 二 1 


并 参考 初等 问题 13. 


矩阵 为 Ny ny 
(人 


试 证 明 {Xn,; Nn 之 0} 和 Me 一 i 7 之 | 都 关于 {Xn} 构成 鞭 ， 


(b) 用 
| 2i ) | 2N — 2i ) 
了 八 N-5 
(**) HT 
N 


代替 (*), 试 确定 入 , 使 得 
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16, 假设 Yo 在 (0, 1| 上 均 旬 分布 ， 给 定 了 mn， 假定 yna+1l 也 在 (1 和 了 了 mn 1| 上 均匀 分 布 . 


试 证 Xo = 二 Yo 及 
一 | 
X, = 2" ， n= 1,2,..., 


是 一 个 软 . 

17. 一 个 色 在 初始 时 刻 装 有 一 个 红 球 和 一 个 绿 球 ， 随 机 地 抽取 一 个 球 ， 然后 把 它 及 另 
外 一 个 回 样 颜色 的 球 再 放 入 铅 中 . 这 个 步 又 重复 无 限 多 次 . 令 Xn 表示 在 第 n 步 红 球 所 占 
的 比例 . 则 {Xn} 是 一 个 蒜 [参见 6.1 节 例 全 |j，(a) 试 利用 最 大 值 不 等 式 证 明 Pr{ Xn > 
3/14 对 于 基 个 m = 1,2,…} < 2/3. 换 句 话说 , 红 球 所 占 比例 超过 3/4 的 概率 无 论 为 何不 会 
超过 2/3.(b) 利用 6.6 节 例 (cj 中 的 极限 分 布 证 明 im PrtXn 之 3/4} = 1/4. 即 在 极限 
情况 下 , 红 球 比例 不 小 于 3/4 的 概率 是 1/4. 

18， 设 有 Pi = e772/j1,4,7 = 0,1,… 是 马尔 可 夫 链 XX 的 转移 概率 ， 其 中 规定 
Poo = 1. (a) 试验 证 Xn 是 一 个 著 ，(b) 试 导出 不 等 式 

pr| max Xn > alXo = | < ifa, 


0<n<oo 


其 中 a = 1,2,.….(c) 试 证 明 以 概率 1 lim X= 0. 

提示 : 利用 可 选 停止 定理 , 其 中 了 是 使 得 Xu = 0 或 外, 之 a 的 首 达 时 nn. 

19. 设 Xn 是 马尔 可 夫 链 ， 其 转移 概率 是 Pi = 1/le() 一 让 (i = 0,1,:…,j = 
i,% 十 1,.…). 证 明 下 面 三 个 过 程 都 是 拷 ; 

(a) Yn, = Xn C— Nn 

(b) LU = Ys 一 和 

(c) Wn = exp{Xn — nle ~— 1)}. 

20. 设 {Xn} 了 是 下 描 . 证 明 序 列 

Ui=0,Un = > {EIXilX1,., Xi-1) — Xi-1},n > 2, 
二 2 

是 一 个 递增 过 程 , 即 Un > Un-1. 


21. 考虑 马尔 可 夫 链 {Xn;n 之 0}, 其 状态 空间 为 非 负 整数 ， 转 移 概 率 矩 阵 为 已 = 
| By i. 设 wm) 是 定义 在 整数 i,n > 0 上 一 个 函数 且 满 足 函 数 方程 


OO 
ub,n) = 》 uk,n+m) pa, 
k=0 


其 中 Pi") 是 从 状态 i 到 状态 大 的 m 步 转移 概率 . 试 证 明 


Un, 一 n(Xn, n) 
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关于 {Xn} 是 一 个 拷 . 

22， 考 虑 一 具有 和 十 1 个 状态 的 马尔 可 夫 链 {Xn;n > 0}, 其 可 能 状态 值 是 zo < 
XT1 < .… < IXN, 转移 概率 人 喷 阵 为 已 ) = Pr{ Xn 二 Tj|Xn = zi}. 假设 {Xn} 也 是 一 个 
鞭 , 试 证 明 状态 zo 和 ZN 是 吸收 的 , 即 PBo = Pyw=1. 

23. 考虑 一 个 具有 AN 十 1 个 状态 {0,1,…, NN} 的 马尔 可 夫 链 {Xn;n > 0}, 其 转移 


概率 
Pi; = ( M ja 
i 


其 中 


1 e 一 2ai/ 六 


Ni 三 一 一 一 一 . 
1 一 e 一 2 


试 证 明 Zi, = e- “< 是 一 个 鞭 . 
24. 设 {Xn,n > 0} 是 状态 空间 为 非 负 整 数 ， 转 移 概 率 抢 阵 为 P =|| 已 ; | 的 瞬 态 马 
尔 可 夫 链 . 定义 


uli) = > Po”. 
n=0 | 
试 证 明 Ln 一 U(Xn) 是 下 靳 . 


25， 考 虑 一 个 具有 无 穷 小 参数 入; 和 应 的 有 限 生 灭 过 程 {X(t),t > 0}),0 <i< 
N (po = 0). 无 穷 小 官 阵 是 


一 A0 A0 0 0 0 
Hl 一 (和 Al 十 1 ) A1 0 0 
和 = 0 122 一 (和 Xa 十 Ho) 和 2 0 
HN HN 
考虑 线性 方程 组 
Ay=0 


的 任意 一 个 解 y = (yo 小 试 证 明 Y(t) = yx(wy,t > 0, 关于 万 =a( Xi < 
是 一 个 蒜 . 
提示 : 证 明和 在 Ay = 0, 则 
N 
yi = 》 P(t)yy, i1=0,1,..…,N, 
j=0 


对 于 所 有 的 t > 0 成 立 , 其 中 忆 ;(t) 表示 过 程 { 针 ();t > 0} 转移 矩阵 . 
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5 题 


1. 试 证 明 , 若 {Xn} 是 下 贰 . 2(z) 是 凸 的 增 函 数 , 目 对 于 任意 的 nn 有 Elpt+ (Xn)| < 
oo, 则 {p(Xn)} 是 下 蒜 ， (参考 引 理 2.2.) 

2. 设 PP =|| Pi; | 是 不 可 约 常 返 马尔 可 夫 链 {XX} 的 转移 概率 矩阵 . 试 利用 下 质 收 敛 
定理 ( 见 注 5.1) 证 明 对 于 所 有 的 i 不等式 组 

y(i) > > Po 
j=0 

的 每 个 非 负 解 y = {y( 四 } 是 一 个 常数 . 

提示 : 与 6.6 节 例 (a) 方法 相同 . 

3 设 {Un} 和 {Vn} 关于 相同 的 过 程 {Yh} 为 车 , 并 且 Uo = Wo = 0, EIU2] < 
oo0, B[V2] < oo, 对 于 所 有 的 n 成 立 . 试 证 明 


nh 


ElUnVn] = >_ E[(Ui — Ur_1) (Ve ~ Ve_1)). 


kK 二] 
特别 地 ,， 有 


BU = BIO Ue) 


kK 二 1 


提示 : 由 于 UnVh = 》,(UkVi 一 Uk-1Ve-1), 故 只 要 证 明 EIUkVi 一 Uk_1Vk-1] = 
天 一 | 
E[(Uk ~ Ur-1)(Vk 一 Ve-_1)]. 但 是 EB[(Ukp Uri)(Ve— Vi) = ElUrVe]— ElUk_i1Ve] ~ 
El(Uk 一 Uk-1)Vx-j. 然后 , 由 对 70,…, Yk-1 的 限制 条 件 并 利用 鞠 的 性 质 , 求 最 后 两 个 
期 望 


4. 设 {Xn} 是 黄 , 目 对 于 某 个 a > 1 满足 
E|[ |X,l* | < oo， 对 于 所 有 的 7. 
试 证 明 


CO 
< Qo 1/a 
SS x a— iE! Xnl | 


提示 : 到 a x 一 / Pr {a [Xk| > :| dt. 然后 对 下 秽 { |Xnl* 上 利用 


kon kn 


最 大 值 不 等 式 . 


5. 设 {Xn} 是 下 黄 . 试 证 明 加 强 最 大 值 不 等 式 
MPr| max Xr > 省 < bE be max Xr > 和 
0<ken | Ok&n 
< EIXi]< El|Xn|l], A>0. 


(注意 : 引 理 5.1 要 求 对 于 所 有 的 有 Xk 之 0, 但 这 里 并 无 此 要 求 ，) 因此 , 对 于 一 个 拷 
{Xn} 


Pr{ max |X:| > | gE 
0O<ken 


ol max |Xx|> 全 ， 入 >0. 
OKkSn 
6. 问题 5 的 结果 可 用 于 加 强 问题 4 中 的 不 等 式 , 使 之 成 为 


se rr] < (52) stir 
试 证 明 该 不 等 式 在 a = 2 的 情形 . 

7. 群体 消失 . 考虑 生活 在 某 一 定 环境 的 生物 群体 , 壁 如 说 在 地 球 上 . 设 Xn 表示 在 时 刻 
n 活 春 的 生物 个 体 数 , 这 样 10} 是 吸收 状态 , X， = 0 蕴 函 善 对 于 所 有 的 m 有 Xn+m = 0. 
有 理由 假定 对 每 个 入 , 存在 6 > 0, 使 得 如 果 Xun 志和 N, 则 


PrlXn+1l 一 0|X1,: ,Xn| 之 0， 
《={XK 一 0 对 某 个 大 =12,… 小 . 


试 证 明 以 概率 1 或 出现 或 当 n 一 oo 时 X 一 co. 由 于 后 者 在 一 个 有 限 的 环境 之 中 不 
可 能 出 现 , 因此 , 最 终 群 体 必 定 消失 . 

8. 设 2Z, Yo, 了 并,… 是 随机 变量 序列 并 且 EE[ |2Z1? ] < oo. 试 证 明 X。 = E[2Z|Y6,…, 环 ] 
满足 著 均 方 收 敛 定 理 的 条 件 . 

9. 设 {Xn} 是 拷 , 目 对 于 所 有 的 n 满足 BE[X2] < KK < oo. 若 


lim sup |E[Xn Xnim| — EIXnlE[Xntmll = 0. 
ROO m 之 1 


试 证 明 XX = lim Xn 是 一 个 常数 , 即 XX 是 非 随机 的 . 
10. 设 {Xn} 是 靳 , 目 对 于 所 有 的 n 满足 EB[X] = 0, 五 [和 2] < co. 试 证 明 


2 
pr { ges 和 > 对 js BIA 入 >0. 


0O<k<n ~ E[X2]+ XA2’ 
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提示 : 对 每 个 c > 0, (Xn 十 c)* 是 下 黄 , 并 对 入 > 0 应 用 最 大 值 不 等 式 得 到 


pr{ max x >A)<Pr{ max Cer +o > +o 
Ok&n Ok&n 


一 El(Xn, 十 c)”] 


SIX+o2 对 于 所 有 的 c > 0. 


然后 , 确定 c 值 使 得 右 端 为 最 小 . 
11. 设 {Xn} 是 下 载 , 试 证 明 


APr (ss, Xk < -| < EI[X+|] 一 E[Xo), 入 > 0. 
Pr max Xi 之 | < ElXol, A > 0， 
Oc<ken 


(参见 引 理 5.2) 


问题 13~16 均 在 如 下 条 件 之 下 考虑 . 设 Bo = {Bi1, B2,…} 是 9 的 可 数 分 割 ， 即 
0 = 上 【]B,, 且 B; 门 B; = %(i 关 站 . 令 B 是 由 和 所 有 Bo 中 集合 的 并 构成 的 o 域 


n= 二 1 
Bo 中 集合 的 并 可 表 为 


了 
B= LU 下 入 9 入 oo， 其 中 Be € Bo. 
k=1 


13. 设 B 是 由 某 个 随机 变量 Y 产生 的 o 域 (这 样 的 随机 变量 Y 至 多 具有 可 数 个 可 
能 值 ). 试 证 明 随机 变量 X 是 8 可 测 的 , 当 且 仅 当 存在 某 个 实 信函 数 f 使 得 XX = f(Y). 
14. 设 XI 和 XX。 是 B 可 测 随 机 变量 . 试 证 明 a1 Xi 十 azX2 对 任意 实数 al, aa 均 为 


B 可 测 的 . 


15. 设 Y 是 8 可 测 的 , 且 E| |Y| ] < oo0. 试 证 明 , 若 对 于 所 有 的 有 界 非 负 B 可 测 随 


机 变量 2, EIY2Z] > 0, 则 Pl{w:Y(w) 20H=1. 
16. 试 证 明 X 是 8 可 测 的 , 当 且 仅 当 存在 某 个 实数 列 {Qax} 使 得 


X(w) = 》 akTBx(w)， 
天 一 1 
其 中 


加 1, 行 wE 8B;, 
ls,(W) = | 0, 若 w FB;. 


特别 地 , 请 注意 此 时 XX(w) 在 每 个 B; 上 均 为 常数 ， 
17. 固定 入 > 0. 设 Xi, XX2,… 是 一 随机 变量 序列 且 满 足 条 件 


lexp{ 和 Xn+1i}|X1,…,Xnj 1 ”对 于 所 有 的 n. 
令 9n = 二 XX!1 十 … 十 Xn (So = 0). 试 证 明 


Pr{ sup(z + Sn) > 和 <e -2)， 对 于 zx <1. 


ng0 


提示 : 利用 可 选 停止 定理 于 非 负 上 著 exp{ 一 和 (i 一 2 一 Sn)}. 
18. 设 4 是 一 随机 变量 , 满足 条 件 


Pr{—e < XX<+e}=1, (A) 
和 
E[X] < —pe, (B) 
其 中 > 0 和 p > 0 是 已 知 的 . 试 证 明 对 于 入 = se-1，In[(1+ p)/(1 -pp)]， 
Ele**]<1, 
并 应 用 问题 17 的 结果 求 下 式 的 界 


Pr{ sup(Z 十 Sn) > 1 对 z < 1 


nn 之 0 


其 中 Sn 二 XX1 十 … 十 mn, 且 在 已 知 XXX2 ,An 的 条 件 下 ，Xn+1 的 条 件 分 布 满足 
(A) 和 (B). 

19. 设 六 是 满足 如 下 条 件 的 随机 变量 : 

(a} EI[X| < m < 0， 

(b) Pr{—l<X<+l}=1. 
六 1, 2, … 是 一 联合 分 布 随机 变量 序列 , 且 在 已 知 1,.… ,Xn 的 条 件 下 , Xn+l 的 条 件 分 
布 满足 (a) 和 (b). 令 5% = Xi 十 … 十 Xn (So =0) 且 对 于 a<z 令 


Ta = min{n:zr+ Sn < a}. 
试 证 明 
ElTo| < (1+2— a)/Im), a<Y. 


{T > n} 由 (0,…, 辣 ) 所 确定 . 试问 了 关于 {Ys} 是 否 一 定 是 马尔 可 夫 时 间 ? 若是 请 给 
出 证 明 , 知 不 是 请 举 出 反例 . 
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21. 设 S, = 各 十.… 十 名, 其 中 {Ek} 是 独立 同 分 布 正 随机 变量 (Prftk > 0} = 1). 
试 证 明 对 任意 的 &a > 0， 

supb | < Oo 

nl a + Sn 
(é&x 假定 仅 取 整数 值 的 情况 在 6.6 节 例 (e) 已 讨论 过 .) 


1 
22， 设 站,】,… 是 独立 随机 变量 , 是 Pr{Y = 二 1} = Pr{Yx = 一 1} = 了 置 
Sk 三 站 十 … 十 站 . 试 证 明 


334 Pr{Sk <k 对 所 有 k=1,…,N|Sw = 村 =1 总 
23. 设 En 是 非 负 随机 变量 且 满 足 


Elén+ilé, 四 , En | < On, 十 En, 


其 中 bn > 0 是 常数 目 A = 》 6n < co. 试 证 明 当 n 一 oo 时 én 以 概率 1 收敛 于 一 有 限 
n=l1 
随机 变量 &. 
24. 在 [0,1) 上 的 Haar 函数 定义 如 下 : 


H(t) 一 : l, 
1 
] 0<t<-, 
H,(t) 一 1 2 
—]， 一 < t < l, 
2 
2"/2, 0<t<27m+), 
Hon ilt) 一 -2n72 9—(n+1) < t < 277 7 二 1, 2, ., 
0， 其 他 ， 


:1 
Ho2n 4;(t) = Hon+41 (-: ) 7 二 1l,...,2 。 


设 f(z) 是 [0,1] 上 任 一 函数 且 满 足 
1 
/ |f(z)ldz < o0. 
1 
定义 ak 二 / f(t)Hx(t)dt. 令 Z 是 [0,1 上 的 均匀 分 布 . 试 证 明 以 概率 1 
0 


f(2)= lim >》 ak Hr(Z) 
k 二 1 


| 


和 


Jim, | (0 -DorHilDlat =0 


大 一 1 


25. 设 XXX2， 是 一 列 相互 独立 的 随机 变量 且 具 有 有 限 矩 母 函 数 pk(t) = Elexp{tXxr}. 


试 证 明 , 若 当 n 一 co 时 有 gn(to) = [| pr(to) 一 GB(to), 其 中 加 天 0,0 < $(t0) < oo， 


k=1 
则 Sn = Xi 十 … 十 Xn 以 概率 1 收敛， 

26. 设 有 一 成 功 游程 马尔 可 夫 链 , 0 是 其 吸收 状态 且 具 有 转移 概率 Poo = 1 和 Pit1 = 
pi 二 1 一 忆 o, ;= 1,2,…. 若 pi 之 Pitl 之 .…, 令 a 是 使 得 apa_i1/(a 一 1)>1> 
(a 十 1)pa/a 成 立 的 唯一 值 . 定义 


0, 2 = 0, 
f(i) = CDiDi 二 1 Da 一 1 1 和 ?< 
2; i 之 a. 


(a) 证 明 对 于 所 有 的 i=0,1,:…， f(i) >i. 

(b) 证 明 对 于 所 有 的 i 有 f(i) 之 [F(Xnt1)|Xn == 避 ,从 而 {f (Xn)} 是 非 负 上 园 . 

(c) 利用 (a) 和 (b) 验证 对 于 所 有 的 马尔 可 夫 时 间 T, f(i) > E[X7T|Xo = 

(d) 证 明 Fi) = EIXT*|Xo = 引 其 中 T+ = min{n > 0;Xn 之 a 或 X= 0}. 这 
样 , T* 使 得 [XT|Xo = 引 在 所 有 的 马尔 可 夫 时 间 位 中 取 最 大 值 . 

27. 设 0 = {wi,w2,……} 是 一 可 数 集 , F 是 由 2 的 所 有 子 集 构成 的 o 域 . 对 于 固定 
的 入, 令 Xo0, 六 1,…, 半 N 是 定义 在 Q 上 一 列 随机 变量 , 了 是 关于 {Xn} 的 马尔 可 夫 时 间 ， 
有 目 满 足 0<T<g<N. 令 三 ,是 由 XX0, 关 1,…,Xn 生成 的 o 域 , 定义 FT 是 由 下 中 这 样 的 
集合 4 组 成 的 , 它 使 得 对 任意 n= 0,…, 和 NN， AN1{ 工 = nj} 属于 Fn. 即 


Fr={A:AeF, BAN{T=n} EA, n=0,..…,N}. 


试 证 明 ， 

(a) Fr 是 o 域 ， 

(b) 工 关 于 Fz 可 测 ， 

(c) Fr 是 由 {Xo,…… ,六 7T} 生成 的 o 域 , 其 中 {Xo0,:…, 关 7T} 是 定义 在 上 可 变 维 
数 的 回 量 但 函数 . 

28. 设 5n = 六 1 十 '… 十 Xn 是 零 均 值 蒜 ， 其 中 对 于 所 有 的 n, EE[Xa] < oo， 试 证 
明 对 任何 单调 实数 列 bl < … < bn < bnt1 1 oo 车 》 EIX2]/ 线 < oo, 则 以 概率 1 

n=1 

Sn /bn — 0. 


343o 
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29. 设 XX 是 一 保险 公司 在 第 n 年 末 的 总 资产 . 每 年 保险 费 收入 为 6 > 0, 而 第 n 年 
付出 的 赔偿 费 为 An,,， 所 以 ntl -一 从 十 b 一 A,. 假定 41， 42， ”> 是 相互 独立 的 正 态 随 
机 变量 , 其 均值 上 <b, 方差 为 o*. 若 该 公司 的 资产 降 为 0 以 下 即 认为 破产 . 试 证 明 


Pr{ 破 产 } < exp{ 一 2(b 一 jp)Xo/o”}. 


30. 设 ,7Y2,… 是 具有 有 限 均 值 / 的 独立 同 分 布 正 随机 变量 . 对 于 固定 0<6 <1 
令 a 是 使 得 尺 > BEluV 六 | = BElmax{u, 站 成 立 的 最 小 4 值 . 置 f(z) = aV 工 . 试 证 
明 {68"f 了 (Mn)} 是 非 负 上 摧 , 其 中 M = max{i,……, Yn}, 而 a 对 于 所 有 的 马尔 可 夫 时 
间 工 有 a = f(0) > El87f(MT)]. 然后 证 明 a = E87 Mr 其 中 TT* = min{n 之 1: 
Yn 之 a}. 这 样 , T* 使 得 五 [6 M7| 在 所 有 马尔 可 夫 时 间 了 中 取 最 大 值 . 

31. 设 六 ,六 1, 六 2,.… 是 具有 负 均 值 上 4 和 有 限 方 差 o* 的 独立 同 分 布 随机 变量 令 
So = 0,Sn 二 XI 十 … 十 An 置 人 MM = mex On, 由 于 < 0, 我 们 知道 M < oc. 设 
EIM| < oo.( 事 实 上 , 可 以 证 明 它 是 02 < oo 的 一 个 推论 . ) 定义 7(x) = z+ = max{7x,0} 
和 f(x) = El(z + M — E[M])"]. 

(a) 证 明 对 于 所 有 的 z, f(x) 这 7(z) . 

(b) 证 明 对 于 所 有 的 z, f(z) 之 EELf(z 十 着 所 以 {f(z 十 Sn)} 是 非 负 上 团 . 

[提示 : 验证 并 利用 M 和 (X 十 M)+ 具有 相同 的 分 布 这 一 事实 .| 

(c) 利用 (a) 和 (人 b) 证 明 , 对 于 所 有 的 马尔 可 夫 时 间 了 T, f(x) > El(zx + ST)™].[(z 十 
9。) = jim (X 二 Sn)T ==0,| 

32. ( 续 上 ) 设 T* 是 马尔 可 夫 时 间 ， 


rr | min{n >0:7+5n > EIM)), 若 z 十 Sn > EIM] 对 于 某 个 mw， 
|, 若 z 十 S, < BEIM] 对 于 所 有 n， 


试 证 明 , f(z) = E[(z 十 ST)7]. 因此 , T* 使 得 Elr(ST)] 在 所 有 马尔 可 夫 时 间 中 取 最 大 值 . 

33. 令 {Xn} 是 成 功 游 动 马尔 可 夫 链 ， 具 有 转移 概率 Pii41 = pi = 1 一 Pio, > 
0,1,…. 设 0<pi<1 且 pi 之 pitl 之 …. 固定 0<B<1,a 是 使 得 aBpa_1/(a 一 1) > 
1 > (a 十 1)Bpa/a 成 立 的 唯一 值 . 定义 


002 一 Pi DiT1 Da li ?2 < 0 
f/f(i)=4 
2， ? 之 Q， 


(a) 证 明 Fi) > i 对 于 所 有 i 成立 
(b) 证 明 f(ij > BE[f(Xn)|Xn-1 = 溃 , 所 以 {6"f(Xn)} 是 非 负 上 钠 . 
(c) 利用 (a) 和 (b) 验证 对 于 所 有 的 马尔 可 夫 时 间 T, f(i) > 五 [9 XT|Xo = 


问 题 303 


(d) 证 明 /区 = E87 XT:|Xo = 计 其 中 IT* = min{n > 0 : Xn > a}. 这 样 ,TT* 
使 得 [B+XT|Xo = 引 在 所 有 的 马尔 可 夫 时 间 了 全 

34. 设 Zn 是 具有 人 人 1 的 马尔 可 夫 链 . 令 f(i) 是 一 有 界 函 数 , 并 对 
于 所 有 的 i 定义 F(i) -oR i,j)f (7) — f°). 试验 明 以 概率 1， 


F(Z1)+ :+ F(ZLn) 
nn 

提示 : 利用 问题 28 的 结果 . 

35. 设 {Xn} 是 一 摧 , 且 满 足 条 件 sup BE[ |Xn| ] < oo0， 试 推导 表示 式 Xn = 名 一 
X 人 ,其 中 {XO}(i = 1,2) 是 具有 有 界 均值 的 非 负 驶 . 

提示 ; ZW = 可 |XN+talyo……， 丈 ] 关于 N 递增 , 所 以 Zr = jim ZX 存在 
且 是 非 负 的 ,并 且 E[ |Z| ] < supE[ | ] < oo. 试 证 明 {2Zn} 是 一 个 蒜 ， 然 后 令 
XH = ZZ, XE) = FX. 

36. 设 {Xn} 是 一 具有 有 限 均值 的 下 蒜 , 且 Xo = 0. 试 推导 表示 式 XX, = Xi/ 十 XX 
其 中 {XX%} 是 靳 而 XX < Xj 是 不 碱 过 程 . 

提示 : 见 初等 问题 20. 

37. 设 {Xn} 是 园 , 且 Y = sup Xn+1 一 Xn| 具 有 有 限 均 值 . 令 41 是 {Xn} 收 僵 的 溃 
件 , 42 是 lim sup Xn = 十 o0 和 lim inf Xn = 一 00 的 事件 . 试 证 明 Pr{41} 十 Pr{42>} = 1. 
换 句 话说 , {Xn} 或 者 收敛 , 或 者 振动 于 正 负 无 穷 大 之 间 . 

提示 : 对 每 个 下 ,XX = XTrAn 收敛 , 其 中 了 = min{n : X > kj, 因为 芝 , 扩大 十 了 了， 
所 以 sup [Xn] < oo. 这 样 , 如 果 对 于 每 个 ,lim sup XX > , 则 {Xn} 不 收敛. 同样 分 
析 可 应 用 于 {一 Xn}. 

38. 设 (6) 是 对 称 函 数 , 关于 发 | 是 不 减 的 , p(0) = 0, 且 {yp( 六 )}?_-o 是 下 对 . 固定 
0 = Uo 乏 21 乏 … 么 tr 试 证 明 


一 |, nN 一 O00. 


Pr{lY| < wl gj<n}>1- >~ Blo02)] = Ele-)] 


j=1 PW) 
(车 p(&) = 如 ,1 = … = un = 入 我 们 得 到 科 尔 莫 戈 罗 夫 不 等 式 .) 
提示 : 车 {|Y| < wj}, 令 荆 为 1; 其 他 情况 工 为 0, 则 


Pr 下 | 和 uj;ls jn}=E 


> hE (区 ) 
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> h 万 (1- 2 


然后 连续 利用 {p(Y%)} 是 下 眶 及 {uw} 的 递增 性 . 重复 之 . 
39. 设 {Yn} 是 非 负 下 对. bn 是 不 增 的 正 数 序 列 ， | 且 满 足 (bo — bn+1)E[Yn] < oo 


Pn) 


n= 二] 
试 证 明 
APrfsup bY > A} < Sb 一 bgt1) BlYx). 
类 一 1 
40. 设 {Xn} 是 一 族 随机 变量 , 令 p(&) 是 定义 在 上 《 > 0 上 的 正 函 数 , 且 满 足 
92) 一 OO 当 E 一 co. 
| 
若 
sup Elp([Xml)] < K < oo， 
m 之 1 
338 试 证 明 {Xn} 是 一 致 可 积 的 . 


41. 设 R(T) 是 Rademacher 函数 有 尼 (z) = sign sin(2*+ixx). 窍 义 


Ln (zx) = | ke! + ar Rk(7)), 0 入 2 式 1， 


天 一 1 
其 中 ak 是 常数 . 
令 n,n 二 0,1,… 是 由 单位 区 间 上 的 分 割 
k k+l 
(站 k= 0,1 2n11 


生成 的 o 域 , Adz) 是 概率 测度 , 它 赋 予 F 的 每 个 基本 分 割 区 间 的 概率 为 1/2"+!. 试 证 
明 

(a) Ln 是 开 , 可 测 的 . 

(b) Ln 是 适应 于 .六 的 拷 . 


附 
Doob[1] 创立 了 坝 理 论 并 证 明 这 个 理论 具有 广泛 的 应 用 
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第 7 章 布 明 运动 


R.Brown 于 1827 年 观察 到 悬浮 在 液体 中 的 小 粒子 呈现 出 不 停 地 无 规则 运动 . 
本 章 的 布朗 运动 过 程 在 历史 上 是 在 试图 解释 这 个 现象 的 过 程 中 而 发 展 起 来 的 . 如 今 ， 
布朗 运动 过 程 一 般 化 及 其 推广 大 量 出 现在 纯粹 和 应 用 科学 的 诸多 领域 中 ， 如 经 济 ， 
通讯 理论 , 生物 , 管理 科学 和 数理 统计 . 

本 章 前 4 节 是 关于 这 个 方面 内 容 的 导 引 , 随后 一 节 是 利用 加 的 方法 计算 奉 干 个 
与 布朗 运动 相 联系 的 期 望 和 概率 . 后 者 要 求 6.5 节 作 为 其 预备 知识 . 最 后 一 节 处 理 
比较 专门 的 论题 . 


7.1 有 月 不 和 材料 


某 些 特别 类 型 的 随机 过 程 已 被 广泛 深入 地 研究 过 ， 布 天 运动 正 是 最 著名 的 而 
上 且 在 历史 上 首先 比较 彻底 研究 过 的 一 个 过 程 . 我 们 仅仅 提出 它 的 显著 特点 的 一 小 部 
分 , 希望 由 此 能 促使 读者 进一步 学 习 这 个 过 程 详尽 的 讨论 . 

布朗 运动 作为 物理 现象 首先 被 英国 植物 学 家 布衣 于 1827 年 发 现 . 这 个 现象 的 
数学 描述 由 爱 因 斯 坦 于 1905 年 由 物理 定律 导出 . 此 后 , 这 个 课题 得 到 了 巨大 的 发 展 . 
其 物理 理论 被 Smoluchowski, Fokker, Planck, Burger, Furth, Ornstein, Uhlenbeck, 
Chandrasekhar, Kramers 等 人 进一步 完善 . 然而 数学 上 的 描述 却 发 展 比较 饮 , 因为 
准确 地 数学 描述 这 个 模型 非常 困难 , 相 比 之 下 , 物理 学 家 根据 这 个 模型 可 任 直 党 简 
单 地 找到 一 些 问题 的 答案 . 许多 结果 Bachelier 于 1900 年 在 他 的 博士 论文 中 虽 已 推 
测 到 , 但 该 理论 的 简明 数学 公式 首先 是 Wiener 在 1918 年 的 博士 论文 以 及 后 来 的 文 
章 中 提出 来 的 ( 见 本 章 末 参考 书目 ). 

利用 随机 过 程 的 术语 讲 , 布朗 运动 是 连续 时 间 , 连续 状态 空间 的 马尔 可 夫 过 程 
的 一 个 例子 . 

用 X(t) 表示 布 骨 运动 的 一 个 粒子 在 z 轴 方 向 的 分 量 (作为 时 间 二 的 函数 ). 设 
Xo 是 粒子 在 时 刻 to 时 的 位 置 , 即 X(to) = zo. 令 p(z,tjzo) 表示 在 已 知 X(t0) = zo 
之 下 XX(t ++to) 的 条 件 概 率 密度 . 我 们 假定 转移 所 服从 的 概率 规律 关于 时 间 是 平稳 
的 , 因此 p(z,tizo) 不 依赖 于 初始 时 刻 to. 

由 于 p(z,tlzo) 是 z 的 密度 函数 , 我 们 有 如 下 性 质 


p(X,tIzo0) > 0, f p(x, tiro}dz = 1. (1.1) 
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进一步 , 我 们 规定 , 对 很 小 的 i,XX(t 十 to) 很 可 能 靠近 XX(to) = zo. 形式 上 我 们 要 求 
lim P(Y， tlzo) = 0， 对 于 z 关 zo. (1.2) 


爱 因 斯 坦 根据 物理 学 定律 指出 p(x,tlzo) 一 定 满足 偏 微 分 方程 


Op _ ,Op 
QH ”Dr2 


这 束 是 所 谓 的 扩散 方程 , 其 中 D 是 扩散 系数 . 碟 浮 在 液体 或 气体 中 的 小 粒子 


(1.3) 


呈现 布朗 运动 是 由 于 它们 受到 液体 或 气体 分 子 磁 撞 而 引起 的 D 的 值 由 公式 D = 


2RT/Nf 计算 , 其 中 RE 是 气体 常数 , 了 是 温度 , N 是 Avogadro 数 , f 是 磨擦 系数 . 选 
择 适 当 的 尺度 , 我 们 可 取 D = 1/2. 我 们 可 直接 验证 


ple, tlao) = Bi em (a - wo) ) (1.4) 


是 (1.3) 的 解 , 实际 上 在 边界 条 件 (1.2) 及 (1.1) 之 下 解 是 唯一 的 . (关于 (1.3) 解 的 唯 
一 性 问题 需要 准确 地 系统 地 站 述 , 其 分 析 要 求 非常 细微 , 这 已 超出 本 书 范围 .) 
导出 (1.3) 的 另 一 途 征 是 用 离散 随机 游 动 来 通 近 . 考虑 在 整数 集 上 的 对 称 随机 
游 动 ( 见 2.2 节 中 的 例 B). 令 px(n) 表示 在 这 种 随机 游 动 中 从 原点 出 发 在 时 刻 n 到 
达 原 点 右边 第 上 步 的 概率 . 这 个 过 程 的 切 普 曼 一 科 尔 黄龙 罗 夫 关系 式 (第 2 章 公 
式 (3.2)) 是 ) , 
Dk(n 二 1) = 5Pk+1(n) 十 5Pk—1(n)) 


由 此 有 | 
pk(nt+ 1)— pk(n) = 5 Pk+1(n) — 2pk (nN) + pk-1(n)). (1.5) 


上 式 堪 边 是 时 间 导 数 的 离散 变形 , 而 右边 部 分 是 关于 空间 变量 二 阶 导 数 的 离散 变形 
的 一 半 . 通过 适当 的 取 极 限 过 程 , 其 中 两 次 转移 之 间 的 时 间 缩 小 到 0, 同时 转移 步 数 
的 大 小 也 压缩 到 0, 我 们 就 可 以 从 (1.5) 过 渡 到 (1.3). 

具体 地 , 设 两 次 转移 之 间 的 时 间 长 度 是 A, 并 且 每 步 的 长 度 为 四 则 (1.5) 类 似 
变 为 


pkn((N + 1)A) 一 Pen(mA) ; petun(nA) ~ 2pkn (RA) + P(r-1)n nA) 
A (0) 


现在 令 A 和 7 趋向 于 0, 保持 关系 式 A = ,并 且 同 时 令 n 和 趋 于 oo 使 得 
kn 一 工 而 nA 一 t. 则 pen(nA) 一 p(x,t|0), 而 (1.6) 形式 上 变 为 (1.3). 


我 们 并 不 想 把 上 述 步骤 严格 化 ,显然 概念 上 是 简单 的 , 但 要 使 得 它 精 确 化 尚 需 
比较 细致 的 分 析 . 
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关于 px(n) 的 另 一 个 类 型 的 极限 过 程 需要 用 到 中 心 极限 定理 . 我 们 记 
Pk(n) = Pr{X1 + X2 + :+ Xn = k}, 


其 中 {Xi} 表示 据 一 个 均匀 硬币 的 一 系列 结果 ( 即 Xi = 1 表示 正面 , X; = 一 1 表示 
反面, 每 种 情况 出 现 的 概率 为 1/2). 由 中 心 极限 定理 ( 见 1.1 节 ) 得 


Vnz 了 
] 
li = 一 一 一 U /2)du. 1.7 
la) r= i PD (1.7) 


(1.6) 的 极限 关系 式 和 (1.7) 的 极限 关系 式 本 质 上 是 相同 的 , 它们 都 与 “随机 过 
程 的 不 变 原 理 ” 相 联系 . 这 些 问题 可 以 精确 化 , 但 已 超出 本 书 范 围 


7.2 ”布衣 运动 的 联合 概率 


转移 概率 密度 函数 (1.4) 仅 给 出 式 雪 一 XX(0) 的 概率 分 布 . 对 布 朋 运动 的 完整 
的 描述 由 下 面 定义 来 完成 : 

定义 2.1 布朗 运动 是 具有 下 面 性 质 的 随机 过 程 {X(t);t > 0}: 

(a) 每 个 增 量 X(t 十 s) 一 大 (3) 服从 均值 为 0、 方差 为 o?t 的 正 态 分 布 , 其 中 c 
是 固定 参数 . 

(b) 对 于 任意 两 个 不 相交 的 时 间 区 则 [,t2], [ta,t4], 不 妨 设 <tao< ta3< 
增 量 基 (&4) 一 关 (t3) 和 关 (t2) 一 (ti1) 是 服从 (a) 中 分 布 的 相互 独立 的 随机 变革 , 对 
于 任意 n 个 不 相交 的 时 间 区 间 也 有 类 似 结 论 . 

(c) X(0)=0 和 六 () 在 t=0 连续 

士 述 假设 意味 着 位 移 X(t+s)-X(s) 与 过 去 相 独 立 , 或 者 , 如 果 我 们 知道 X(s) = 
xo, 则 对 于 7 < s X(r) 的 取 值 并 不 影响 X+s) 一 羡 (s) 的 概率 规律 . 用 式 子 表示 
就 是 , 如 果 上 > 如 > 五 >…> 如 ,我 们 有 


Pr[X(t) < z|X(to) = zo, X(t1) = (如 ) = Tn) 
= Pr[X(t) & z|X(to) = zol. (2.1) 


这 说 明了 布朗 运动 过 程 的 马尔 可 夫 性 . 然而 , 我 们 应 当 指 出 , 独立 增 量 的 假设 
(b) 实际 上 比 马尔 可 夫 限 制 性 更 强 ， 

在 条 件 X(0) = 0 之 下 , X(t) 的 方差 是 ot, 因此 o? 有 时 称 为 过 程 的 方差 参数 . 
过 程 X(t) = X(t)/o 是 具有 方差 参数 为 1 的 布朗 运动 , 称 为 标准 布朗 运动 . 因此 , 我 
们 总 是 可 以 把 任意 一 个 布朗 运动 简化 为 标准 布 明 运动 ， 随后 的 大 部 分 结果 我 们 仅 
对 后 者 进行 推导 . 
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由 定义 的 (a), 当 o? = 1 时 , 我 们 有 
Pr[X(t)} < rzIX(to) = zo] = Pr[X(t)— X(to) < xz— zol 


1 0 Q J 
一 i 一 / exp -a 一 | Qo. (2.2) 
定义 中 (b) 和 (a) 的 相 容 性 可 由 著名 的 正 态 分 布 的 性 质 推 得 . 例如 , 如 果 二 < 
tz 志 t3, 则 
X(t3) — X(t) = [X(ta) ~ Xt) + [X(t2) — X(t). 


在 右边 我 们 有 均值 为 0、 方差 分 别 为 t3 一 tz 及 刀 一 石 的 独立 正 态 随机 变量 , 因此 它 
们 之 和 是 均值 为 0、 方差 为 ts 一石 的 正 态 随机 变量 , 这 正 是 所 要 求 的 . 

在 条 件 X(0) = 0 之 下 , 利用 (2.1) 和 (2.2) 导出 X(t1), X(t2),… ,X(tn)(ti < 
tz <…< 如 ) 的 联合 密度 是 不 困难 的 . 实际 上 , 我 们 只 要 知道 Xi = X(t ) = x1, XX2 一 
入 1 一 22 一 21 直至 Xn — An-1 = Tn — Tn-l 的 概率 密度 ， 由 定义 的 (b) 我 们 马 
上 得 到 密度 函数 的 以 下 表达 式 : 


f (x1, ”3 Tn ) 一 2 2Z1， ti)p(z2 一 此 1)， to 一 t1) “p(Tn 一 nn-l1; tn 一 tn—1),; (2.3) 


其 中 


p(z,t) = 3 exp(—22 /2t). (2.4) 


利用 公式 (2.3), 原则 上 我 们 可 以 计算 任何 想 要 的 条 件 概 率 . 

根据 马尔 可 夫 性 我 们 知道 , 如 果 < to。 < ts, 在 已 知 Xi) 和 关 (t2) 条 件 下 ， 
式 ( 妇 ) 的 条 件 密度 和 仅仅 已 知 X(t2) 条 件 下 X(ts) 的 条 件 密度 是 相同 的 . 

然而 , 已 知 六 (二 ) 和 X(t3) 的 条 件 下 , 求 关 (t2) 的 密度 也 是 有 趣 的 . 为 了 确定 起 
见 , 我 们 假设 羡 ( 丰 ) = 关 (ts) = 0, 具体 一 点 , 比如 说 ,=0,ts=1, 且 b=t0<t< 
1). 

由 (2.3), X(t) 和 X(1) 的 联合 密度 是 


f(x,y) = A exp -3 全 十 由 一切 


由 此 推 得 在 已 知 (0) = X(1) = 0 条 件 之 下 X(t) 的 条 件 密度 js(zlX(0) = X(1) = 
0) 是 


Tx2 


1 1 
VC 一 CXD -3 一 5 ， 一 00<T< oO0. 
特别 地 有 Ec(X(t)) = 0 和 E.(X?(t)) = t(1 一 ,其 中 E 为 在 条 件 X(0) = 
XX(1) = 0 之 下 的 期 望 . 用 相同 的 方法 可 得 到 更 加 一 般 的 结果 . 
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定理 2.1 在 已 知 久 (tl) = 4 和 X(t。) = B 的 条 件 下 , 对 于 妇 <t< to, X(t 

的 条 件 密度 服从 正 态 分 布 , 其 均值 和 方差 分 别 为 
B—-A (to 一 t)}(t 一 ti) 
A 和 . 

这 可 以 用 如 下 方法 归结 为 前 面 的 情况 ， 前 面 已 指出 , 在 条 件 X(t1) = 4 和 
X(to) = B 之 下 的 随机 变量 革 艾 , 与 在 条 件 X(0) = 0, 半 (ts 一刀) = B 一 4 之 下 的 随 
机 变量 A 十 X(t 一石 ) 具有 相同 的 密度 . 显然 , 这 与 在 条 件 X(0) = 0, X(t2 一 二 ) =0 
之 下 的 随机 变量 


(tC—t1) 


入 十 针 (t 一 村 ) 十 
t2 一 如 


(B— A) 
具有 相同 的 密度 . 


7.3 ”轨道 的 连续 性 和 最 大 值 变量 


布衣 运动 过 程 的 物理 学 起 源 提示 我 们 , 它 的 任 一 可 能 的 实现 X(t), 作为 粒子 由 
于 介质 分 子 连续 碰撞 引起 运动 的 z 坐标 的 图 形 , 是 一 连续 函数 . 这 个 事实 是 正确 的 ， 
但 它 的 严格 证 明 要 求 比较 细致 的 分 析 , 我 们 将 在 7.7 节 中 叙述 . 

样本 轨道 和 (t) 虽然 连续 却 非常 奇怪 , 它 的 导数 处 处 不 存在 . 这 个 事实 也 是 很 深 
入 的 . 关于 布 开 运动 轨道 构造 的 一 个 比较 完整 叙述 可 以 在 P.Levy 和 Mckean 的 著作 
中 找到 ( 见 本 章 末 参考 书目 ). 

利用 胃 道 的 连续 性 我 们 将 说 明志 样 推演 出 有 关 布 月 运 动 各 种 有 趣 的 概率 表达 
式 . 下 面 的 计算 阐述 了 所 谓 反 射 原理 的 应 用 . 

记 住 X(t) 的 连 绪 性 , 现在 我 们 考虑 样本 轨道 的 集合 X(t) :0 < t < T,X(0) = 0 
且 具 有 性 质 X(T) > ala > 0). 由 于 X(t) 是 连续 的 , X(0) = 0, 因此 存在 一 个 时 刻 
T( 这 是 一 个 随机 变量 , 取决 于 具体 的 样本 轨道 ), 它 是 入 首次 达到 值 a 的 时 刻 . 

对 于 上 > 7T, 我 们 作 半 (#) 关于 X =a 的 反射 , 得 到 


X(t) = X(t), 行 上 < 7T， 
a— [X(t) -qj， 春 t>7 


( 见 图 7-1). 注意 到 由 于 X(T) > o 故 X(T) < a. 因为 当 已 知 X(r) = a 时 , 对 于 
t > T 时 轨道 的 概率 规律 关于 值 z > a 和 z < a 是 对 称 的 , 并 且 独 立 于 在 时 刻 7 前 
的 历史 , 从 而 反射 论证 法 把 每 条 具有 X(T) > a 的 样本 轨道 展现 为 以 相同 概率 出 现 
的 两 条 样本 轨道 区 (t) 和 天 人 ,使 得 


> YU > a. 
oR A (o) > 和 和 oR XU) 0 
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图 7-1 


反之 , 根据 这 个 对 应 的 性 质 , 每 个 样本 函数 X(t) 当 max X(w) > a 时 , 可 从 具有 相 
同 概率 的 两 个 样本 函数 X(t) 中 的 任何 一 个 得 到 , 其 中 一 条 除 X(T) = a 之 外 必 有 
X(T) > a, 但 Pr{X(T)=a}=0. 于是, 我们 可 断定 在 条 件 匀 (0) = 0 之 下 有 


Pr{ max, X(u) > a} = 2Pr{X(T) > a} = exp(—7z /2T)dzx. (3.1) 


9 OO 

VanT 人 

上 面 的 论证 法 不 能 认为 是 完整 的 , 虽然 这 个 方法 是 典型 的 , 它 是 研究 具有 连续 
轨道 马尔 可 夫 过 程 的 基础 . (这样 的 过 程 称 为 扩散 过 程 .) 严格 的 论述 必须 使 用 关于 
马尔 可 夫 时 间 ( 见 14.4 节 ) 的 强 马尔 可 夫 性 , 其 中 马尔 可 夫 时 间 是 对 应 于 首次 从 0 
到 达 a 的 事件 . 

借助 于 (3.1), 我 们 可 以 确定 在 条 件 (0) = 0 之 下 , 到 达 a > 0 的 首 达 时 间 分 
布 . 设 Ta 表示 X(t) 首 达 a 的 时 间 , 其 中 XX(0) = 0. 则 显然 有 


Pr{T, «< t}= Pr max X(u) > alX(0) = 0}. . (3.2) 
但 依照 (3.1). 


2 > 1 7? 
Pr max, X(u) >alX(0) =0} = 2Pr{X(t) > a} = ti|/ exp -3 | dz 


2 
2 [一 1 x 
pr{T, <t} = ya/ exp -应 | dz， 
也 


Pr{7T, < tt} = 2 ex _ d (3.3) 
a ~ 本 IT av p 9 y: " 


所 以 


作 变 换 x = yvt, 得 
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随机 变量 To 的 密度 阔 数 可 由 关于 t 微分 (3.3) 得 到 . 这 样 


fr, (tlX(0) = 0)dt = -二 和 exp -和 dt. (3.4) 


由 于 布朗 运动 的 对 称 性 和 位 置 齐 次 性 , 对 于 分 布 (3.4) 我 们 推 得 
Pr{ min, X(u) < O|X(0) = q] 
= Pr{ max X(w) > 0|X(0) = ~a} “(由 对 称 性 ) 
一 Pr{ max, X(u > alX(0) =0}=Pr{fT, < ”( 由 齐 次 性 ) 


i 
一 到 u em| 司 du, a>0. (3.5) 
可 用 男 一 方法 表达 (3.5): 如 采 关 (to) = a, 则 X(t) 在 to 和 妇 之 间 至 少 有 一 个 
地 点 的 概率 P(a) 是 


lal ‘0 a ~—3/2 
Pa) = 页 | exp | 一 区 | du. (3.6) 


利用 此 公式 我 们 可 以 计算 如 果 (0) = 0, 则 半 () 在 区 间 (ti, 拍 ) 至 少 有 一 次 为 
0 的 概率 wa. 

事实 上 , 我 们 可 限制 X(to) 的 可 能 值 . 如 果 X(to) = a, 则 X 在 区 间 (to, 刀 ) 
至 少 有 一 次 为 0 的 概率 是 P(a). 由 全 概率 公式 得 


a = [ P(a)Pr{|X(to)| = alX(0) = oda = /FP fr a) exp -和 da. (3.7) 
把 (3.6) 代入 , 然后 改变 积分 顺序 得 到 
本 / 加- 中高 信人 [到 字 we 
- 二 / 3 ( a a exp 1- (3 + 过 )| da du. (3.8) 


里 面 的 积分 可 准确 地 计算 , 经 化 简 之 后 , 我 们 得 到 
_ Vio wf -to 


(to 十 
由 变量 替换 ww = 如 ov 得 


9 [V(ti-to)/to dy 9 fi to 
f 一 一 / 一 一 aArctan 一 
Jo 1 十 v2 J ' to 
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利用 标准 的 三 角 关 系 公 式 , 我 们 可 写 为 
2 ~ cos 一 或 二 2arccos /2 
ti 2 T ti 
综 上 所 述 , 我 们 有 
定理 3.1 在 已 知 关 (0) = 0 的 条 件 之 下 , X(t) 在 区 间 (to, 刀 ) 至 少 有 一 个 零点 


的 概率 是 
_ 2 fa 
a = —arccos4 /| 一 . 
J ti 
借助 同样 的 “反射 原理 ”, 我 们 来 解决 下 面 的 问题 : 对 z >0 和 ?>0, 求 
Ai(x,y) = Pr{X(t) > Y, Min, X(u) > 0[X(0) = z}. (3.9) 
为 此 , 我 们 从 如 下 的 明显 关系 式 开始 
Pr{X(t) > yxX(0)= 7z} 
= At(x,y) + Pr{X(t) > Yy, in, X(u) < 0|X(0) = z}. (3.10) 
反射 原理 应 用 于 最 后 一 项 . 
图 7-2 是 引导 我 们 分 析 的 一 个 适当 图 形 . 我 们 可 以 推出 
Pr 人 的 >y, min X(u) < OX(0) = z} 
= Pr{X(t) < -y, min X(u) < OIX(0)= 7} 
= Pr{X(t) < —y|X(0) = 2x}. (3.11) 


入 
eo 
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(3.11) 成 立 的 理由 如 下 : 考虑 一 条 从 z > 0 出 发 , 满足 X(t) > y, 并 在 某 个 
中 间 时 间 7 到 达 0 的 轨道 对 这 条 轨道 在 时 间 7 之 后 关于 0， 实 施 反 射 , 我 们 得 
到 一 条 从 z 出 发 并 且 在 时 刻 t 到 达 比 -y 更 小 的 值 的 轨道 . 这 蕴涵 着 (3.11) 前 面 
两 项 相等 . 最 后 的 两 项 等 式 显然 可 从 它们 意义 得 到 , 因为 条 件 min X(w) < 0 对 于 
X(t) < -yy > 0) 是 不 必要 的 . 把 (3.11) 代入 (3.10) 得 到 

At(z,y) = Pr{X(t) > yX(0) = 17} — Pr{X(t) < —y|X(0)= 7} 
= Pr{X(t) > vy — rz|X(0) = 0} 
一 Pr{X(t) < 一 (y 十 x)|X(0) =0} (由 位 置 齐 次 性 ) 
= Pr{X(t) > y—z|X(0) =0} — Pr{X(t) > y+zlX(0) = 0} (由 对 称 性 ) 
YZ 
其 中 p(w,t) = (2nt) 2 exp{ 一 如 /2t} 是 布朗 运动 的 转移 概率 密度 函数 . 
作为 反射 原理 的 最 后 一 个 应 用 , 我 们 导出 


M(t) = max X( 和 Y(t) = M(t)— X(t) 


Oust 


的 联合 概率 密度 函数 . 
由 反射 原理 推 得 ( 见 图 7-3) 


人 


Pr{M(t) > m, X(t) < rz} = Pr{X(t) > 2m 一 7} 


Vt 


-1-$ (4) m 之 0,m 之 2 
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其 中 B(x) 是 标准 正 态 密度 86(z) = (1/V2r) exp( 一 x2/2) 的 分 布 函数 . 关于 z 微分， 


然后 关于 m 微分 , 改变 符号 , 得 到 M(t) 和 X(t) 的 联合 密度 函数 
计算 式 子 如 下 


rd er bd er 
2m—7z 2 2 人 一 和 
.2 2 


到 本 (Z) 一 一 7Z 邓 (2D)， 350 


这 里 利用 了 初等 关系 式 


用 f(m, zx) 表示 这 个 联合 密度 , 显然 我 们 有 


2 0 < m, 
f(m,7x) = 3 (2m — x)exp[—(2m — x)*/24], | jm (3.13) 


为 了 得 到 M(t), Y(t) = M(E) 一 X(t) 的 联合 密度 g(m,y), 我 们 有 
Pr{M(t) <a,Y(t) <b}= | | ,fm m — ydydm. 


因此 所 求 的 联合 密度 是 g(m,y) = f(m,m 一 y) 或 


2 


gm,y) = VY/ 3 (m+ Yy) expl— (m+ y) /24], m>0,y>0. (3.14) 


7.4 ”变形 和 推广 
我 们 将 闭 述 , 如 果 X(t) 是 标准 布 表 运动 , 则 过 程 
Xi(t) = cX(t/c2)， 对 于 固定 的 c> 0， 


J] ttX(1/t), t>0, 
XX2(t) = | 0 ;=0. 
及 
Xa(t) = X(t 十 h) 一 半 (h)， 对 于 固定 的 h> 0. 
每 一 个 都 是 标准 布 开 运动 的 变形 . 
我 们 验证 定义 2.1 的 要 求 . 显然 , 在 这 些 过 程 中 任 一 增 量 XX;(t+8) 一 X(t) 是 零 均 
值 的 正 态 分 布 , 并 且 在 不 相交 的 时 间 区 间 上 的 增 莉 显然 是 相互 独立 的 随机 变量 . 为 
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了 继续 验证 这 些 是 布朗 运动 , 我 们 需要 求 每 种 情况 下 的 方差 互 [{Xi(s+ 坟 一 生 (s)} 门 
有 


EN{Xi(t+s)— Xi(s)}] = cE{X((t+ s)/c) 一 X(s/c 
=c{(t+s)/c — s/c}=t, 


(* (0) -ex (a)} 
-< 


of lip 
本 s tt 十 3 t 十 5 


El({X2(t + s) ~ X2(s)}"] =E 


十 万 万 


fx 人 


以 及 
E[{Xsa(t+ s) — Xa(s)}] = E[{X(t+h+s)— X(h+s)}]=t. 
为 完成 此 分 析 , 需 验证 每 个 X(t) 在 原点 是 连续 的 . 这 个 性 质 对 于 XX1(t) 和 X(t) 
是 显然 的 , 但 对 于 X2(t) 需要 某 些 论证 . 对 后 者 只 须 证 明 如 下 
Pr {i ~ = 0|X(0) = "| 一 虐 
( 见 间 题 14 和 问题 15.) 
布 度 运动 其 他 的 变形 导出 新 的 重要 的 随机 过 程 . 下 面 是 一 些 例子 
A. 在 原点 反射 的 布 骨 运动 
令 {XX(),t > 0} 是 布 度 运动 . 与 随机 过 程 
Y(t)=|X(W)|, t>0 


| XGO， 如 果 X(t) >0， 
”| -X(t)， 如 果 X(t) < 0， 


具有 相同 分 布 的 随机 过 程 称 为 在 原点 反射 的 布朗 运动 , 我 们 简称 为 反射 布朗 运动 . 
因为 布朗 运动 的 位 置 对 称 性 , 所 以 反射 布朗 运动 是 马尔 可 夫 的 . 的 确 , 在 标准 布 
朗 运动 情况 下 (c” = 1)， 
Pr{Y (tn + 8) < zIY (to) =Z0o 了 (如 ) = zn} 
= Pr{—z < X(tn ts) < +z|X(to) = +x0,.…, X(tn) = +Tn} 
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= Pr{—z < X(t +s) < +z|X(t0) = 7zo,X(t) = zn} (由 对 称 性 ) 
= Pr{f-z < X(t +s) < +z|X(tn) = xn)} 


十 之 
= / p(yY 一 Zn; s)dy, (4.1) 


并 且 0 和 ti 如 < 五 < … < 如 8s>0. 这 样 反 射 布衣 运动 提供 了 另外 一 个 连续 时 间 马 
尔 可 夫 过 程 的 例子 , 它 的 样本 轨道 Y(t) 是 连续 的 . 状态 空间 是 由 非 负 实数 组 成 的 . 

由 于 Y(t) 的 矩 和 |XX()| 的 气 是 相同 的 , 反射 布朗 运动 的 均值 和 方差 容易 计算 . 
例如 , 在 条 件 Y(0) = 0 之 下 , 有 


十 co 
PIG] = / [zlp(z, t)dz 


-2 Bi?(- rx“ /2t}dz 
2t 


4 


1 


其 中 , 我 们 通过 变量 替换 y = z/vt 求 积 分 值 . 另外 . 
Y(t) 的 方差 = E[Y (#2] - E[Y (0)]? 
= E[|X(t)|] ~ 2t/7 
= (1 — 2/nx)t. 


在 (4.1) 中 进行 变量 替换 , 易 知 对 于 t > 0, Y(t) 是 连续 型 随机 变量 , 具有 如 下 
转移 概率 密度 函数 


Dt(T,Y) = p(y 一 0， t) + p(y + 7,t), (4.3) 
且 
bp 
Pr{fa < Y(t) < BIY(0) = 727} = / Di (xT, Ydy, 
其 中 p(z,t) 由 (4.2) 给 定 . 
B. 被 原点 吸收 的 布朗 运动 
假设 布 朋 运动 的 初始 值 X(0) =z 是正 的 ', 令 7 是 过 程 首 次 到 达 0 的 时 间 . 与 


1, 为 定义 在 X(0) = z 条 件 下 的 布朗 运动 , 或 “从 z 开始 的 布朗 运动 ”只 要 在 定义 2.1 的 条 款 (c) 中 将 
“X{0) = 0" 改 为 “X(0) = z” . 
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随机 过 程 


和 有 ， 对 于 tg7 
2 多 二 | 0， 对 于 t>7 49 
具有 相同 分 布 的 随机 过 程 称 为 被 原点 吸收 的 布朗 运动 , 简称 为 被 吸收 的 布朗 运动 . 
被 吸收 的 布朗 运动 也 是 连续 时 间 马 尔 可 夫 过 程 . 我 们 验证 如 下 形式 的 马尔 可 夫 
性 : 
Pr{Z(tn t+ 8s) > y|Z(to) = x20, ,Z(tn-1) = Tn-1, Z(tn) 一 2 
= Pr{Z(tn t+ s) > z|Z(tn) = 7} 
其 中 TT>0 和 0 < to < < tn,s> 0. ( 当 r=0 时 比较 容易 ， 留 给 读者 验证 .) 
如 (4.1) 那样 , 我 们 通过 与 Z(t) 相 联 系 的 布朗 运动 过 程 X 计算 这 些 概 率 . 由 条 件 
z+ > 0 推 得 
min X(u)>0. 
因此 ， 
Pr{Z(t, +t) > yl2Z(to) = xo, Et 1) 一 Tn CQ 加 ) = 2} 
= Pr{Z(tn tt) > y2(t0) = To, Z(tn-1) = Tn-i, Z(tn)=7, 
on XW > 0} 
= Pr{X(tn +t) >y, min X(tn +u) > OlX(to) = zo,.…, 
X(tn-1) = Tn-l, X(tn) = x} 
= Pr{X(t) > y, min X(u) > OX(0)= zx} 


一 4i(c， y), 
其 中 hi(z,y) 由 (3.9) 定义 , 并 且 由 (3.12) 计算 , 故 


Ar(x,Y) 一 | pe t,t) — plu 十 t,t)du 


y+27 
一 / p(u — 7,t)du. 
y 


在 条 件 Z(0) = z > 0 之 下 , Z(t) 是 随机 变量 , 其 分 布 兼 有 离散 和 连续 的 部 分 . 
离散 部 分 是 


Pr{Z(t) = 0|2(0) = z} = 1— Ai(z,0) 


2 
-1- |/ p(w — 7,t)du 
0 


=1 -| p(u, t)du 
一 _ 
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-2 / ~ plu ddu 
- 2 ot + 1,t)du. 
在 区 域 > 0, Z(t) 是 一 连续 型 随机 变量 , 并 且 对 于 0<a<b， 
pr{a < Z(t) < bl2(0) = 12} = Ai(z,a) — Ai(z,b) 
- / plu £0) plu 4 ,ldu. 
这 样 , 被 吸收 的 布 骨 运 动 连续 部 分 的 转移 概率 密度 函数 是 
Pi(D2) = p(y ~ £,t) — p(y + 7,t). 
C. 漂移 布 骨 运动 
设 {X(t),t > 0} 是 布 明 运动 . 漂移 布朗 运动 是 与 


er 


X(t)= X(t) + put, t>0, 


有 相同 分 布 的 随机 过 程 , 其 中 j 是 常数 , 称 为 河 移 参数 . 我 们 也 可 以 用 平行 于 定义 
2.1 的 方式 来 描述 漂移 布衣 运动 . 

定义 4.1 漂移 布衣 运动 是 具有 下 面 性 质 的 随机 过 程 {X(t);t > 0}: 

(a) 每 个 增 量 X(t 十 s) 一 XX(s) 是 均值 为 yt、 方差 为 ot 的 正 态 分 布 ; 上 pc 是 固 
定 的 常数 . 

(b) 对 于 任何 两 个 不 相交 的 时 间 区 间 [ti,to],[ta,tsj,t1 < to < ta < t4, 增 量 
XX(t4) 一 X(t3) 和 X(t2) 一 天 三 ) 是 与 (a) 中 所 给 定 的 分 布 相同 的 独立 随机 变量 对 
于 任意 n 个 不 相交 的 时 间 区 间 也 有 类 似 性 质 . 

(c) X(0) =0 并 且 X(t) 在 t=0 连续 

如 前 , 由 定义 推 知 位 移 XX(t 十 s) 一 XX(s) 与 过 去 独立 , 换 句 话说 , 如 果 我 们 知道 
X(s) = zo, 对 于 7 < s,X(t) 的 值 并 不 影响 和 X(t 十 s) 一 关 (s) 的 条 件 概率 规律 . 写成 
式 子 就 是 , 如 果 +> 如 > 和 > .> 加， 


Pr{X(t) < riX(to) = xo, Xt) = £1 ,X(tn) = zn} 
= Pr{ X(t) < zlX(to) = ao (4.5) 


这 就 说 明了 过 程 的 马尔 可 夫 性 . 然而 , 我 们 强调 独立 增 量 假设 (b) 实际 上 比 马尔 可 
夫 性 更 强 . 利用 定义 条 款 (a), 我 们 有 


Pr{X(t) < rzIX(to) = zo} = Pr{X(t) — X(to) < 2 ~ rol 
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T—T0 


isin 


(一 AL 一 可) | dy 


1 
-oo V27n(t— to)o ' | 2(t — to)o” 
{z—zo—H(t—to)}lo 
= / p(t ~ to, Yy)dy, 
一 co 


其 中 


p(t, 7x) = - exp{—7z’ /2t}. 


与 4 关 0 时 ,过程 不 再 是 对 称 的 , 肥 射 论证 法 不 能 用 于 计算 过 程 最 大 值 的 分 布 . 
我 们 下 一 节 将 利用 著 理 论 来 计算 这 个 分 布 . 


D. 几何 布朗 运动 


设 {X(t),t > 0} 是 带 有 漂移 参数 yj 和 扩散 系数 o? 的 布朗 运动 . 由 
Y(t)=e*, tt>0, 
所 定义 的 过 程 有 时 称 为 几何 布朗 运动 . 其 状态 空间 是 区 间 (0, o0). 
由 于 Y(t) =Y(0)ex(-X(0), 利用 正 态 分 布 的 特征 函数 , 我 们 计算 
ElY (|Y(0) = = yEle* HX00)] 


oo (ash) 
ElY(t)?lY(0) = y= y Ble -XO 


= yy exp {: 区 十 54o| | 
上 Y(t) 的 方差 是 


VarlY (PIY (0) = yy = E[Y(t)*IY(0) = y) ~ {EIY WY (0) = y} 
~ {ep 2 ( 十 ;20") — exp 2 ( 十 3”) | 
= Y? exp 2 ( + 3 ) lexp(to*) — 1}. 
7.5 ”用 园 方 法 计算 若干 布 骨 运动 的 量 


将 可 选 抽样 定理 应 用 于 与 布朗 运动 相关 的 拷 中 可 以 迅速 计算 许多 重要 的 基 . 我 
们 在 第 一 章 曾 指出 标准 布朗 运动 {X(t);t > 0} 是 闭 , 但 这 绝 不 意味 着 我 们 感 兴趣 的 


只 是 这 个 拷 , 过 程 


U(t)= X(t)—t 
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村 
V(t) = exp {x0 一 3 (5.1) 
关于 标准 布朗 运动 {XX()} 者 是 著 , 其 中 和 是 任意 实 常数 . 我 们 直接 予以 证 明 . 对 于 ”|357 
0 区 …tn=t 和 s > 090, 我们 有 
EIU(t + s)X(t1),.……, X(tn)] = EL[X°(t + s)|X(t)] — (t+ 8) 
= El{X(t+ ss) — X(t IX 
+2E[X(t {X(t+ 8) — X(t}HX) 
+ E[X*(t)|X(t)] — (t+ s) 
= s+2x0+X*(t)— (t+s) 
= UI(t). 
类 似 地 ， 


ElIV(t + s)X(t1),.……, X(tn)| = V(t)xE spotxd 十 3) 一 区 (] 一 es 
= V(t). 
附注 ”把 例 (5.1) 的 鞠 置 于 一 个 更 加 容易 得 到 的 结构 中 是 有 好 处 的 . 设 马 尔 可 
夫 过 程 {X();t > 0} 具有 平稳 转移 概率 密度 
p(t, zly)}dz = Pr{z < X(t)} <z+dz|lX(0) = vy}, 
写 其 相 联 系 的 著 的 一 般 构造 可 叙述 如 下 . 设 wz 是 也 数 方程 
u(x,s) = f pstlo)uke,t 十 8s)dé, s,t >0. (5.2) 


的 解 , 则 Z(t) = 区 和 二 入 是 关于 由 关 ( 的 直至 时 刻 t 为 止 的 历史 产生 的 o 域 族 
大 =cfXG)i0 和 vv< 寺 的 黄 , 倘若 王 |2 (bb < oo. 
证 明 我们 计算 
El2Z(t + s)|F(s)] = EIZ(t+ s)|X(s)] (由 马尔 可 夫 性 ) 
= Elu(X(t+ 8),t+ s)|X(s)| 
= | plx(s)ule,t+ s)dé 
二 U(X(s),s) (利用 函数 方程 ) 
= 和 Is) 
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这 就 证 明了 {2(t)} 是 一 个 鞭 . 
由 直接 计算 表明 


wz 四 一 2 一 上 和 wl(z,t) = exp 区 一 3 
满足 孙 数 方程 (5.2), 此 时 应 取 
plt, zly) = i exp{—(x — 9) /2t}. 
在 布朗 运动 的 情况 下 , 可 以 进一步 证 明 , 如 果 4(z,t) 是 充分 可 微分 的 , 并 且 满 


挟 关 系 式 (5.2), 则 w(x,t) 还 满足 


Ou 102u 
FH 十 2 B73 = 0. (5.3) 


在 第 15 章 关 于 扩散 过 程 中 , 我 们 将 提出 对 最 后 这 个 结论 的 一 个 比较 完整 的 证 明 . 反 
之 也 是 正确 的 , 当 (5.3) 成 立时 也 可 推 得 (5.2). 
下 面 是 应 用 笛 (5.1) 进行 计算 的 例子 . 设 a < 0 < 5 是 已 知 的 , 令 了 = Ts 是 过 
程 到 达 a 或 b 的 首 达 时 间 : 
To = inf{t >0:X(t)=a 或 X(t) = 0), 
i TAn= min{T,n}. 
由 于 {U()} 是 拷 , 则 EIUV(T 入 n)] = E[UV(0)] = 0, 由 此 得 到 
EITAn] = EI[X*(T An)] < (lal + 0)?. 
这 样 ， | 
EIT| = lim | Pr{T > t}dt = lim BITAn] < (lol +6)? 
+ 0 + 
这 里 重要 在 于 了 = Tos 是 有 限 的 , 甚至 Tas 具有 有 限 均值 . 
设 以 是 过 程 {X(t)} 到 达 a 之 前 到 达 ,， 的 概率 , 即 
4 = Pr{X(T,) = 6}. 
由 于 {XX()} 是 著 , T= Tas 是 有 限 的 , 并 且 {X(t 入 T)} 是 有 界 的 . 这 样 , 应 用 可 选 停 
止 定理 有 
0 = E[X(T)) 
= aPr{X(T) = a} + bPr{X(T) = 0b} 
= all 一 可 十 bu， 


I 
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所 以 


-oO 359 
lal+b 


现在 我 们 回 到 扶 {U0(t)}, 注意 到 EIU(T)] = 0, 计算 得 


好 一 Pr{X{T,,) 一 b} 


ElTs] = E[X°* (Too 


=a’[l—u+bu 

-72 b 2_ ja| 
lal+b laj+b 

= lalb. 


通过 改变 已 给 过 程 的 原点 和 尺度 , 我 们 可 以 计算 具有 方差 参数 o? 和 初始 位 置 
XX(0) = z 的 布 庆 运动 的 相应 量 . 其 结果 如 下 : 

定理 5.1 设 { 人 人 的 it>0} 是 具有 方差 o? 和 X(0) =z 的 布 骨 运 动 . 给 定 a,b 
满足 a < x < 几 设 了 是 过 程 首 达 a 或 5b 的 时 间 , 则 


Pr{X(T) = bX(0) =2} = (2 -0)/(b—a), 


并 且 


EITIX(0) = x] = 三 人 _zjtz a). 


下 面 我 们 转 问 研 究 市 有 漂移 参数 4 地 0 和 方差 o” 的 布朗 运动 {X (2),t > 0}. 


V(t) = exp [xe 一 (xw 十 52o2 ) | (5.4) 
定义 一 个 靳 , 我 们 选取 
AQ 一 一 241/a”， 
所 以 (5.4) 指数 的 第 二 项 为 0. 则 Vo(t) = exp{XoX(t)} 是 一 个 靳 .To。 是 过 程 到 达 
a <0 或 b>0 的 首 达 时 间 , 应 用 可 选 停止 定理 , 得 
1 = E[Vo(T,e) 
= Pr{X(To) = a} exp{AMoa} + Pr{X (Te) = b} exp{Aob}, 


并 且 
1 一 exp{Aoa} 


exp{Mob} 一 exp{Xoa 
其 中 Xo = -21/c“. 再 者 , 我 们 可 移动 原点 以 处 理 X(0) = z 的 情况 . 360 


Pr{X (To) 一 b} 一 


| 
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定理 5.2 设 {X 人 it> 0} 是 带 有 当 移 参数 jy 关 0 和 方差 o* 的 布 妇 运动 , 假 
设 X(0) = z. 则 过 程 在 到 达 a < zx 之 前 到 达 b > z 的 概率 由 下 式 给 出 : 


加 exp(—2J7x/0) — exp(—2ja/0”) 
OU) OP) To 7 exp(-2p8/0) —exp(=2pa/oD) 


推论 5.1 设 XX(t) 是 带 有 漂移 参数 j; < 0 的 布 骨 运动 . 设 


W= max X(t}— XO0). 


Ot<oo 
则 W 具有 指数 分 布 
Pr{W > w}=e **, w2>0 
其 中 和 = 2|p4l/o”. 
证 明 ”在 定理 5.2 的 公式 中 我 们 令 a 一 00. 由 于 J. < 0,exp(~ja/o”) 一 0. 
这 样 ， 


,lim, PH{ X(Ta) = bX(0) = 台 =expBpt 一 z/o9 


但 当 a 一 -oo 时 , 左边 部 分 是 过 程 到 达 的 概率 , 或 过 程 最 大 值 超过 b 的 概率 . 因 
此 ， 对 于 w= b— 帆 ) 


Pr{W > w}= Pr{ max X(t) > blIX(0) = zx} 


其 中 入 = 2jx|/o”, 证 毕 加 
作为 最 后 一 个 例子 , 我 们 来 计算 首次 通过 单 壁 的 时 间 的 拉 普 拉 斯 变换 . 我 们 令 
z > 0 是 固定 的 , 并 且 了 = 7 是 过 程 首次 到 达 水 平 z 的 时 间 : 


二 TT 二 inf{t : XX(t) > z}， 如 果 对 某 个 t+>0 有 (之 %， 
co， 如 果 对 所 有 t+ 之 0 有 X(t) < xz. 


设置 0 = 和 + 35X07. 则 VD) = exp{AX(b) - 的 } 是 掀 , 并 且 , 若 X(O) =0, 则 
1 = EIV(T At)], 
或 


1 = Elexp{ AX(T At) ~ 0(T At)}]. 


1. 若 苹 (t) 在 [0, oo0) 无 最 大 值 , 则 取 上 确 界 代替 这 里 的 max 和 区 .一 一 译 者 注 


Ot<oo0 
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现 设 入 > 0 充分 可 以 保证 9 >0, 则 
0<V(TAt) < ee””, 
从 而 , 利用 第 6 章 引 理 3.3, 可 以 取 极 限 , 得 


exp{ 和 2 一 eT}, 如 果 工 < oo， 


lim V(t 入 7)= 
一 co | 0, 如 果 全 = oo. 


于 是 
1= lim EIV(T At)] = e**Ele™"] 
或 
Ele—" "| 一 e 一 人 z 
接着 讨论 9 与 和 的 关系 . 我 们 有 
2 十 HA 一 = 0 


或 
人- 一 凡 土 V122 十 2020 
= 一 一 一 一 


我 们 要 求 入 > 0, 因此 | 
A= (VI +2020 — 4). 
当 jy. < 0, 了 是 有 缺 估 的 随机 变量 , 即 了 以 正 概率 取 无 限 , 并 且 
Pr{T < co} = lim Ble- 皂 ] = lim exp -去 J +300 ~ p)| 
= exp(—2zlu|/o”), 
这 和 推论 5.1 是 一 致 的 . 当 jy > 0 时 , 以 概率 1 有 了 < oo, 并 且 拉 普 拉 斯 变换 是 


Ele™’T] = exp -三 | M2 十 2020 一 p)| . (5.5) 1362 


对 于 带 有 漂移 参数 4 > 0 的 布衣 运动 , 可 以 求 变换 (5.5) 的 道 , 并 得 到 7 的 概 
率 密度 函数 的 显示 表达 式 . 我 们 叙述 此 结果 如 下 . 
定理 5.3 设 X() 是 带 有 渐 移 参数 j >0 的 布 基 运动, 且 z > X(0) =7 是 已 


知 的 . 令 7 是 过 程 首次 到 达 水 平 z 的 时 间 . 则 在 (0) = z 条 件 之 下 , T. 具有 概率 
密度 函数 


_ £Y2 
f(t;7,2) = exp -| ,，t>0. 
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例 ”几何 布朗 运动 (7.4 节 例 D) 经 常 被 用 来 建立 有 价值 东西 的 模型 ,譬如 一 
个 完善 的 市 场 交 易 的 股票 价格 . 这 些 价 格 都 是 非 负 的 且 通 常 表示 出 波动 行为 , 包含 
几何 布朗 运动 的 两 个 特征 : 间歇 的 指数 增长 与 从 长 远 看 呈 指 数 豆 减 . 更 重要 地 , 大 
to < 三 <.…< 妃 为 时 间 点 , 逐次 比率 


Ya)/ Yo Y(t )/Y (tn-1), 


是 独立 随机 变量 , 因此 , 粗略 而 言 不 重合 时 间 间 隔 的 比率 变化 是 相互 独立 的 . 从 粗 
略 形式 上 讲 , 这 正 是 几何 布朗 运动 能 够 在 一 个 完善 的 市 场 中 成 为 适当 模型 的 原因 所 
在 . 如 果 未 来 价格 跟 当 前 价格 的 比率 Y(t 十 s)/Y(t) 被 预测 是 有 利 的 , 很 多 买 家 将 进 
入 市 场 , 他 们 的 要 求 倾向 于 提高 当前 价格 了 (). 类 似 地 , 厂 Y(t + s)/Y(t) 被 预 测 是 
不 利 的 , 很 多 卖家 将 出 现 且 倾向 于 降低 当前 价格 . 当 比 率 无 法 被 预测 是 有 利 还 是 不 
利 的 时 候 , 也 就 是 当 不 重 和 倒 时 间 间 隔 的 价格 比率 相互 独立 的 时 候 , 获得 平衡 

我 们 将 给 出 一 个 例子 , 几何 布朗 运动 被 用 来 估计 股票 市 场 一 种 永久 认 股 权证 的 
价值 .一 种 认 股 权证 是 在 一 个 特定 时 间 段 的 任意 时 间 以 规定 价格 在 一 给 定 的 股票 
市 场 购买 固定 数量 的 股票 的 选择 权 . 持 有 者 的 利润 是 市 场 价格 高 于 选择 价格 的 超 
出 部 分 . 假定 持 有 者 可 以 以 规定 价格 购买 而 以 市 场 价 格 卖 出 以 实现 潜在 利润 . 

我 们 只 考虑 没有 期 满 日 期 的 永久 认 股 权证 . 对 于 这 种 权证 , 一 个 合理 的 策略 是 
当 股票 价 格 首次 达到 某 个 特定 的 水 平时 ( 记 为 a) 就 进行 行 权 . 选择 适当 的 单位 , 我 
们 可 以 假定 权证 的 规定 价格 为 1, 从 而 , 当 市 场 价 为 a 时 , 潜在 利润 为 a 一 1. 当然 ， 
我 们 只 考虑 a > 1 的 情况 , 因为 人 们 不 会 在 当前 价格 比 1 小 的 时 候 还 以 规定 价格 1 
购买 股票 

当 某 人 拥有 这 种 权证 时 , 他 就 拥有 前 面 所 述 的 股票 的 直接 所 有 权 , 它 以 单位 时 


间 比 率 为 a = /+ zc2 的 速度 增加 , 因为 


ElY (DIY(0) =Y] =yexp 人 (+ + jj | 


人 们 和 需要 有 更 高 的 回报 率 , 96 > a, 或 等 价 地 , 以 单位 时 间 -6 的 速率 贴现 潜在 利润 
(a ~— 1). 
设 T(a) 为 股价 第 一 次 达到 水 平 a 的 时 间 , 则 权证 持 有 者 淤 在 利润 的 贴现 为 
eT (T(a)) — 1] = eT (0 ~ 1). 


我 们 想 计算 贴现 利润 的 期 望 值 , 从 而 选择 a 使 利润 的 期 望 值 达到 最 大 . 根据 布 
朗 运动 , T(a) 是 X(t) = InY(t) 第 一 次 达到 水 平 lna 的 时 间 , 在 定理 5.3, 我 们 计算 了 
T(a) 的 概率 密度 函数 , 以 及 在 (5.5) 式 中 计算 了 T(a) 的 拉 普 拉 斯 变换 . 利用 (5.5) 
式 , z 二 Ina, 7 = 二 Iny, 我 们 有 ( 见 图 7-4) 
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Profit 


na) ' 


其 中 


设 g(y,a) 为 期 望 的 贴现 利润 , 我 们 有 


g(y,a) = (a — 1)Ele™™ “IO)= 引 


(a—1) (2) 

我 们 将 上 式 关 于 a 微分 并 令 其 等 于 0, 找到 利润 最 大 水 平 a = a*: 
Og yy \Pt+l 1] Y NP 
5a =0= Pe D(a) +(a) 

则 

+ -大 
p 一 1 


条 件 0 > /+ 30? 保证 1 < a* < co. 给 定 当前 股票 价格 % 则 权证 的 价值 为 
9g(y,0°) = (0 ~ 1)(y/a”) 
1 加 一 | 
p 一 1 p 


7.6 ”多 维 布朗 运动 
设 {Xi1(t);t > 0},…, {Xn(t);t > 0} 是 标准 布朗 运动 , 彼此 间 在 下 面 意义 下 是 
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统计 独立 的 : 对 于 时 间 点 的 任何 有 限 集 合 


t11， t12,) “3 tini, 


t21,t22,° ,tno, 


tN,1,tN,2) ,LN,nN’ 


NN 个 向 量 
入 1 一 (Xi(t1i1), 7 ,XX1(tin )), 
大 > 一 (X2(t21), “7 ,XX2 (to n,)), 


入 N 一 (Ntvi)， … ,XN (tN,ny)), 


是 相互 独立 的 . 癌 量 值 过 程 
X(t) = (X(t),.…, XN(t)), tz0, 
称 为 N 维 布衣 运动 . 在 平面 上 和 在 空间 中 布衣 运动 的 粒子 的 运动 可 分 别 由 二 维和 
三 维 布朗 运动 过 程 来 描述 . 
考虑 二 维 布朗 运动 义 (t) = (X1(),X2(t)). 并 计算 当 第 一 个 坐标 首次 达到 给 定 
水 平 z > 0 时 第 二 个 坐标 的 分 布 . 令 Ts 是 满足 Xi(t) = z 条 件 的 首次 时 间 , 现在 我 
们 来 求 Y(z) = Xa(Tz) 的 分 布 


图 7-5 描绘 了 二 维 布衣 运动 在 平面 上 的 一 条 胃 道 , 并 绘 出 了 Y(z) = X2(7T:) 的 
数值 


XD 


X(T)= YW 


TI 关 | | 
| 


图 7-5 二 维 布朗 运动 
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固定 z > 0, 我 们 来 计算 特征 消 数 gu) = Blexp{iwY(z)H 由 于 工 是 由 过 程 Xi 
确定 的 , 了 与 过 程 X2 是 独立 的 , 因此 , 由 全 概率 公式 可 知 , 公式 


$(u) = / ~ Elexp{iwX2(t) HdFtt), 


其 中 
F(t)= Pr{T, < +t} 366 


是 Tz 的 累积 分 布 函 数 , 可 由 等 式 (3.3) 计算 得 到 . 由 于 X2(t) 是 均值 为 0 和 方差 为 


t 的 正 态 分 布 ， , 
Elexp{iuX2(t)}| = exp (#2) . 


显然 
pb(u) = 人 exp -ae dF'(t) 


=F BB: -让 


= exp(—|ulz), 一 00 <U<o0. 


上 式 是 利用 的 拉 普 拉 斯 变换 ( 见 公式 (5.5)) 得 到 的 , 其 中 0 = au2,p = 0 且 
o*=1. 
这 是 柯 西 概率 密度 函数 
1 
nzll + (zx/z)2) 
的 特征 函数 . 甚至 我 们 可 以 得 出 更 多 结论 . 初等 问题 5 是 证 明 随机 过 程 (7.,z > 0} 
具有 平稳 独立 增 量 的 第 一 步 . 由 此 推 得 


D(z) = 一 oo < 2 < oo. 


Y(z) = Xo(T,) (6.1) 


也 具有 平稳 独立 增 量 . 一 般 来 说 , 阁 任 给 一 个 马尔 可 夫 过 程 {X(t),t > 0} 和 具有 平 
稳 独 立 增 量 和 递增 样本 轨道 的 过 程 {Tz; z > 0}, 其 中 To = 0, 我 们 就 可 引出 新 的 过 
程 

Y(z)= X(T.), 2z>0. 
从 区 形成 Y 的 过 程 称 为 从 属 运算 , 且 过 程 {T.; z > 0} 称 为 从 属 过 程 . 在 上 述 条 件 


下 , {Y(2);z 之 0} 是 马尔 可 夫 过 程 . 此 外 , 如 果 {X(t);t > 0} 具有 平稳 独立 增 量 , 则 
{Y(z);z 之 0} 也 同样 具有 平稳 独立 增 量 . 


367 


330 第 7 章 布朗 运动 


径 向 布朗 运动 
设 {X(b;t > 0} 是 N 维 布朗 运动 , 过 各 
R(t) = [X1(t)* + X2(t)? + .+ XN(t)]/2, t>0, 
称 为 径 向 布朗 运动 , 或 称 具有 参数 5N - 1 的 贝 塞 尔 过 程 . 这 是 一 个 在 状态 空间 
0, co) 有 连续 样本 轨道 的 马尔 可 夫 过 程 . 从 = 到 y 的 转移 概率 密度 函数 是 


2Z2 十 1 TY 
p(T,Yy) = tie (1- | myyI-(N/2) 7 ( ) N=-1 
i(T,Y) xp D7 (zy) (N/2-1()Y (6.2) 


t>0, zx,y>0, 
其 中 五 (z) 是 修正 贝 塞 尔 函 数 ， 


1 (2) DO (z/2)2k+to 
1 < kT(k+v+ 1) 


2 
I = /一 
1/2(2) yy COS hz, 
2 T+ Tt 
Pel,Y) = / 吉 “p 2 }eosn ( 蜡 ). 


把 这 个 公式 与 (4.3) 比较 , 可 知 当 N = 1 时 贝 塞 尔 过 程 归结 为 反射 布朗 运动 . 
我 们 将 简短 地 研究 N = 2 的 情况 . 当 入 = 3 时 , 关系 式 


12 . 
Ti/2(z) 一 ~ Sinhz 
2 Ty 
p(T,Y) = V em 人 -二 上 | 7 sinh (=) 


令 = 一 0, 利用 连续 性 我 们 得 到 对 应 于 = = 0 的 密度 . 由 此 得 到 
p(0,9) = 9/ 3 exp(-¥ /2), 
这 是 当 N = 3 和 R(0) = 0 时 R(t) 的 边缘 密度 


现在 我 们 来 考虑 N = 2 情况 , 说 明 对 应 的 贝 塞 尔 过 程 是 马尔 可 夫 的 、 并 计算 其 
转移 密度 . 我 们 通过 如 下 的 极 坐标 变换 ， 


R(t) = VX1(t)? + X2(t)?, 


(6.3) 


得 到 


时 出 
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6 上 = arctan[X2(t)/X1(t)] 


因为 布 妇 运动 是 马尔 可 夫 的 ， 
Pr{R(tn +t) < blX(to) = 20 有 (加 1) 三 2n-1 大 (如 ) = 1} 
= Pr{R(tn, +t) < bX(t,) = 72} = Pr{R(t) < blX(0) = 2}, (6.4) 


其 中 0 < to < < tn,t > 0, m1,: “* ,Ln 是 平面 上 任意 的 点 ， 炎 一 (zl,Z2). 出 
Pr{ R(t) < bIX(0) = x} 


1 一 21)2 十 (yo 一 Zo)? 
= exp{ - do 
yi+y2 


2<b2 2nt 


b 27 2 _ 2 
=/ / 一 ep -ne £1) + (eon? Z2) ja rdr 
0 [Lvo 


其 中 我 们 进行 了 变量 替换 刀 = 7 sin 0, yz = 7 cos9. 并 由 微 积分 可 知 dy1dy2 = rdrdb. 
由 于 


(rsiabg 一 ZI) 十 (rcosg ~ 72) = 六 一 2r(zlsing 十 zaocosg) 十 | 
其 中 lz 上 = z1 十 Z2, 所 以 


Pr{fR < blX(0) = x} = | -exp {下 


py | T(r, zw)dr 
其 中 » 

T(r,£) = | exp {= sin0 十 2Zo cos0)} d0. 
设 角 乡 满足 


sing = x1/||zll, cosdg = x2 /Nell, 


其 中 |lzll = Vz? + z2. 利用 三 角 恒 等 式 sin 9 sin 0 + cos $cos0 = cos($ + 人 
27 
T(r,72) = / mp {Te COs(9 十 0) | do 


2 
= | op {me oos0 | dg, 
0 t 


这 是 由 于 积分 是 在 区 间 be [0, 2x] 上 , 在 此 区 间 cos($ + 9) 是 周期 的 . 再 者 . 
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但 


广 1， 如 果 上 = 1,3,.…， 
cos Yd4 = kl27 
Ta 


这 样 ， 利 用 修正 页 塞 尔 函 数 , 有 
2 CR Ce 
/ exp{o COS 60}d0 = 27 2 Fa {as | 


k=0,2,.…: 
OO 27 
CO 
一 2 》 一 
2777 人 2 
王 27710(a). 


于 是 ， 


Pr{ R(t) < blX(0) = x} = 了 rk | 一 5 2x1o { zl | dr 
= [ pe 人 lz mydr (6.5) 
其 中 由 等 式 (6.2) 取 N = 2 确定 . 这 样 , 我 们 证 明了 
Pr{R(tn +t) < X(to) = z0…., X(tn) =2} = pellellr)dr. (6.0) 


令 Tj= 二 (T1292,j==0,…,n, 其 中 2)=(T17,72;). 类 似 地 , 令 9; = arctan(z2;/X1;). 
条 件 其 (t0) = zo0,… ,六 (tt) = zn, 等 价 于 条 件 R(to) = ro 98(to) = 00,:…, R(tn) = 
rn, 昌 (tn) = 0n. 在 式 子 (6.6) 中 利用 这 一 点 , 我 们 下 面 证 明 {R(t),t > 0} 的 马尔 可 夫 
性 并 决定 其 转移 密度 函数 .基于 全 概率 公式 , 设 p(90,…,9n) 是 (8B(t0),……, 9B(tn)) 
的 联合 概率 密度 函数 , 我 们 有 


Pr{R(tn, +t) < blR(to) = ro,*……, R(tn) = rn} 


2x 27 
/ 人 Pr{ R(tn, + t) & blR(to) = roB(to) = 00,…, R(tn) = rn 
0 0 


一 0 ， ,0n, }d00, *，， , d0,, 


27 2 
0 
po Pi(Tn, 7)dr 
Q 


这 就 验证 了 马尔 可 夫 性 并 证 实 了 式 子 (6.2) 是 二 维 贝 塞 尔 过 程 的 转移 密度 . 
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7.7 布朗 运动 的 轨道 


把 布朗 运动 的 样本 路 线 或 轨道 看 成 随机 选择 的 函数 (与 作为 随机 变量 集合 的 观 
点 不 同 ) 是 值得 我 们 注意 的 . 如 果 我 们 想得到 一 个 处 处 不 可 徽 的 连续 函数 , 我 们 必须 
付出 巨大 努力 . 然而 布朗 运动 的 轨道 肯定 ( 意 指 概率 为 1) 是 这 样 的 函数 ! 这 只 不 过 
是 布 骨 运动 轨道 众多 引 人 注 目的 特点 之 一 . 


A. 轨道 的 连续 性 


关于 指标 是 实 区 间 随 机 过 程 X(t) 的 连续 性 , 有 用 种 不 同 的 类 型 . 其 中 的 三 种 与 
第 一 章 中 介绍 的 随机 序列 三 种 极限 概念 相对 应 . 我 们 说 {XX 人 } 是 
(a) 均 方 连续 的 , 如 果 对 每 个 t, 有 


lim EIIX(s) ~ X(t = 0. 
(b) 依 概率 连续 的 , 如 果 对 每 个 上 和 正 数 e, 有 
lim Pr{|X(s) — X(H)| > e} =0. 
(c) 几乎 必然 连续 的 , 如 果 对 于 每 个 t 有 
Pr{lim X(s) = X(t)} =1. 
前 两 个 概念 可 由 过 程 的 有 限 维 分 布 确定 . 的 确 , 二 阶 矩 有 限 的 过 程 是 均 方 连续 


的 当 且 仅 当 均值 沙 数 m( = 五 KG 连续 并 且 其 协 方差 陋 数 TT(s,t) = ELI{X(s) -~ 
m(s)}{X(t) 一 m(t)H 在 对 角 线 t= s 处 连续 . 这 可 以 从 下 面 展 开 式 中 看 出 : 


EIX(s) — XO] = Ts,8) — 2T(8,t) + TE,t) + mls) — me)? 
由 切 比 雪夫 不 等 式 
Pr{|X(s) — X(O| > e} < EIX(s) -XGO 由，e > 0 

可 知 每 个 均 方 连续 过 程 均 是 依 概率 连续 的 

虽然 对 于 很 多 情况 , 这 些 连 续 性 概念 是 十 分 合理 和 有 用 的 , 但 对 于 所 有 情况 它 
们 并 不 都 是 适用 的 . 按照 这 三 种 意义 泊 松 过 程 (tb) 都 是 连续 的 . 事实 上 , 首先 注意 
到 均值 函数 m(b = X 和 协 方差 T(s,t) = Xmin{s, 甘 显然 是 连续 的 . 再 者 , 对 固定 
的 二 事件 lim X(s) 关 X(b) 发 生 仅 当 过 程 在 时刻 有 跳跃. 既然 这 些 胱 路 时 刻 具 有 
连续 分 布 (T 分 布 ), 故 这 些 事 件 的 概率 为 0. 这 样 , 对 于 每 个 上 > 0， 


Pr{lim N(s) = N(t)}=1, 
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因此 , 泊 松 过 程 依照 我 们 的 定义 , 在 每 个 指定 的 t 处 也 是 几乎 必然 连续 的 . 

可 是 , 我 们 从 未 见 到 一 个 泊 松 过 程 的 轨道 呈现 出 连续 状态 ! 显然 , 对 于 随机 二 
数 连续 性 我 们 尚 需 要 更 严格 的 准则 . 我 们 称 随机 过 程 X(t) 具有 连续 的 轨道 , 如 条 
X(t) 以 概率 1 是 t 的 连续 函数 . 由 这 个 定义 产生 了 若干 技术 上 的 困难 , 在 第 1 章 我 
们 通过 指定 所 有 有 限 维 分 布 确定 一 个 随机 过 程 . 可 是 , 若 我 们 仅 利 用 这 些 有 限 维 分 
布 能 否 可 以 确定 过 程 几乎 必然 具有 连续 轨道 ? 实际 上 , 若 X(t) 几乎 必然 具有 连续 
轨道 , 对 某 个 随机 变量 7, 我 们 定义 


x -| 及 人世 ， 如 果 上 夭 T， 


0， 如 果 t=. 


则 蔚 (t) 并 不 出 现 连 续 轨道 . 然而 , 只 要 当 r 具有 连续 分 布 且 独 立 于 {X( 引 }, X(t) 和 
多 (t) 才 具 有 相同 的 有 限 维 分 布 . 于 是 , 我 们 只 好 减弱 要 求 . 说 一 个 由 有 限 维 分 布 确 
定 的 随机 过 程 几乎 必然 具有 连续 轨道 , 如 果 存 在 该 过 程 的 一 个 具体 代表 {X(t)}, 这 
里 , 它 肯定 ( 即 以 概率 1) 是 t 的 连续 函数 . 

下 面 我 们 给 出 布朗 运动 {X(t);0 < t < 1} 这 样 的 一 个 代表 . 注意 , 我 们 仅 考 虑 
[0, 1] 中 的 时 间 指 标 t. 

定义 在 [0, 1] 上 Haar 函数 如 下 : 


Hi(t)= 1, Ogte1, 


1 
1, O&Kt< ph 
H2(t) = 
—1, 


2n/2 0 < to 92-(n+1) 
Hon+41(t) 一 —27/2, 2 一 (mn 十 1 to 
0, 其 他 . 


1 
H2n +j(t) = H2nti (: 一 二 ， j= 三 1,.…,2". 


前 6 个 函数 如 图 7-6 所 示 . 
Schauder 函数 Si(t) 是 Haar 画 数 的 积分 ，Sk 的 = / Hi(T)d7. 它们 的 图 形 像 
是 一 些小 帐篷 , 并 且 如 果 把 它们 画 出 , 可 知 


1 (n+2)/2 
,= {i S01...0<j<2n— 1 7.1 
02t< 5» +i(t) (3) ) 于 0, 1, ,0 J ( ) 
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1 (9 


(a) 


2 HD [12 

| | 于 
| 1 | 
| | | 
| t 1 
了 | 
1 2 2 

(€) (1) 

图 7-6 
且 
D2n+j(t)S2n ik(t) =0, 1l<k <) < 2 “. (7.2) 
现在 令 Q( 放 ,7 一 1,2, 0 为 实数 列 ， 置 
bn = max{|a(2” + k)l;k = 1,.….,2°}. (7.3) 


我 们 利用 下 面 的 事实 . 如 果 


则 级 数 
z(t) = DV al(k)Sk(t) 
k=1 
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是 一 个 一 致 收敛 于 了 上 的 连续 函数 . 为 证 明 这 个 事实 , 只 要 验证 条 件 


mtn 
nim, 2 a(k) as Sr(t)| =0. (7.5) 
式 (7.1)~(7.3) 告诉 我 们 
DJ 十 1 
.9—(j+2)/2 
2, a(k) max Sx(t)| < bj2 (7.6) 
k=21+1 


所 以 通过 把 (7.5) 中 被 加 项 依照 指标 = 27,27 十 1,…,22+1 分 组 , 我 们 可 看 到 当 

m > 2 时 , 在 (7.5) 中 柯 西 和 小 于 》 by2-6+3/2, 而 后 者 在 条 件 (7.4) 之 下 收敛 于 
j=N 

0. 那么 , 当 系 数 满足 (7.4) 时 , x(t) 是 上 的 连续 函数 , 此 即 我 们 所 要 求 的 . 


Bn = max{|Ax|: 2" <k < 27t!}. (7.7) 
cc 1 n/2 
则 当 2 Bu (5) < 时 
X(t) = >》, AkSk(t) (7.8) 
天 一 1 


是 上 的 连续 函数 . 已 知 
oo 1 n/2 | 
Pr B, | 一 < co ， 一 1， 
3" 


所 以 , 式 (7.8) “必然 " 定义 一 个 连续 函数 . 为 验证 此 断言 ,我 们 首先 对 正 态 积分 进行 
分 部 积分 得 


Pr{|4| 之 7x} = | exp(—u’ /2)du 
2 exp(—z*/2 5 exp(—u’ /2 
| p( /2) / p( . / dul 


V2 = 
-2 exp( 一 Z2/2) 
~ Vn 小 . 


这 样 ， 
OO CO 1 

Pp An > 2Vv1 <k » A 人， 
Pr > VE < kD 矶 二 


n= 二 2 
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其 中 上 是 常数 . 上 面 右 边 的 和 是 收敛 的 , 由 Borel-Cantelli 引 理 (第 1 章 ) 推 得 仅 有 
有 限 多 的 值 |4;| 超过 2Vinn. 这 意味 着 仅 有 有 限 多 的 值 Bi = max{|A，| : 2 <ng 


2/2 nj 
2j+1} 超过 2VIN3V7 由 于 vi (3) < oo, 这 就 验证 了 并 B， (3 ) 是 以 概 
率 1 收敛 的 , 从 而 最 终 X(b = 并 A445S4(t) 是 连续 的 
我 们 尚 须 证 明 X(t) 是 布朗 运动 . 如 果 过 程 的 每 个 有 限 维 向 量 {X(t1),……，X (ti)] 
具有 多 元 正 态 分 布 ,我 们 称 其 为 高 斯 过 程 . 一 个 高 凑 过 程 是 由 它 的 均值 和 协 方差 函数 
所 确定 , 因为 这 些 参数 唯一 地 确定 了 所 有 有 限 维 多 元 正 态 分布 , 故 为 完成 我 们 的 证 
明 , 我 们 只 须 证 明 (1)X(t) 是 高 斯 的 ; (2)BIX(D] = 0 且 (3)B[X(2)X(s)] = min{s, 引 


前 面 两 个 性 质 是 容易 验证 的 . 每 个 部 分 和 X(t) = 》 Ax.Sk(t) 是 高 斯 的 (为 什 
k=0 
么 ?), 并 且 这 个 性 质 在 极限 情形 仍 保留 . 确实 , 容易 验证 Xat) 均 方 收敛 于 X(t), 这 
说 明 在 式 子 BEIX( = lim D3 E[Ak]Se(t) = 0 中 , 极限 号 与 期 望 的 交换 是 合理 的 : 


余下 尚 待 确定 的 是 X(t) 和 X(s) 的 协 方差 , 并 看 它 与 标准 布朗 运动 的 协 方差 
( 即 min{s,t}) 是 否 相 等 . 即 , 我 们 希望 验证 等 式 


min{s,t} = BIX() )X(t) 


= > ,Yat Ak]S; (9) Skt) 


= 》 Sx(s)Sk(t). 
k= 二 1 


这 纯粹 是 古典 分 析 中 的 问题 . 但 为 了 保持 我 们 的 论述 自 成 体系 , 并 显示 我 们 的 方法 
和 定理 的 威力 , 下 面 应 用 拷 论 证 法 . 在 第 6 章 问题 24 中 , 我 们 曾 断 言 


Sar He(Z) = Elf(2)Y,:.., Y;), 


k=1 


其 中 Fr) 是 满足 
1 1 
/ fOr < o0, a = / fHi(Tdr 和 Y= Hi(2) 


的 任意 函数 , Z 是 在 [0, 1] 上 均匀 分 布 的 随机 变量 . 这 样 , 这 些 部 分 和 构成 Doob 区 
因而 以 概率 1 收敛. 如 果 fu Fr)jPdr < oo, 这 个 蒜 还 是 平方 可 积 的 , 且 当 n -oo 
时 在 均 方 收敛 意 义 下 有 


Dak He(2) — EIf(Z)Y, Yo,.] = f(2). 
k=1 


3795 


376 


338 第 7 章 布朗 返 动 

最 后 等 式 是 由 于 2 被 无 限 序列 ,Yo,… 所 确定 . 评估 均 差 可 见 , 由 于 
| V0 -Don He Par 
0 Kk 二 1 


=-/ UPdr -2 | (Rdr+ 上 mo d 
= | {fFPar -Do 
0 k=1 


且 当 n 一 oo 时 , 上 式 收敛 于 0, 我 们 推 得 {ff(7)}?dr = 吕 应 用 此 公式 于 
[f(7) 十 9g(7)], 然后 应 用 于 f(7) 和 g(7)， 相 减 之 后 即 得 所 谓 的 Parseval 关系 式 : 


[ jrjo(rjdr = Yanbe, (7.9) 
天 一 1 


1 
其 中 bi = / 9g(7T)Hk(T)d7. 固定 s < t, 并 令 


(7) 1l, 0O<&r<gt, 
了 | 一 
U，t<T 芝 1 


则 ax = / f(T)Hir(T)dT = Sk(s), 日 br = Si(t), 而 当 s <t 时 有 / f(r)g(7)dr = s. 


代入 (7.9) 得 8 = 》 Si(s)Sk(t). 对 于 t < s 可 采用 同样 论证 , 干 是 得 到 我 们 所 希望 
k=0 
的 结果 
min{s,t} = >》 os)oktH 
k=1 


这 就 完成 了 我 们 的 证 明 , 即 X(t) = 》 AxSk(t) 是 布朗 运动 过 程 , 以 概率 1 其 


k=1 
轨道 是 t 的 连续 函数 . 
对 于 指标 集 是 0 < t < co 的 布 妆 运动 B(t), 首先 对 1<t<o% 令 W(t) = 
tiX(1/t), 置 B(t) = W(1 十 引 一 W(1),t 之 0. 我们 让 读者 验证 它 确实 是 所 希望 的 过 程 . 
( 即 它 是 高 斯 的 且 具 有 所 希望 的 均值 和 方差 .) 
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由 上 述 构造 法 可 推出 布 妇 运动 另 一 奇特 性 质 . 将 (0, 1) 上 均匀 分 布 随机 变量 U 
的 十 进 小 数 展 开 , U = 0.212223.… 的 数字 按 对 角 线 方法 排 成 如 下 的 无 限 矩 阵 


每 一 排 给 出 的 十 进 小 数 展 开 


Di = 0.212Z306Z10… 
Us 过 0.22Z5Z92014 
Us = 0.44Lg8L13219*…, 


是 独立 的 并 且 在 (0, 1) 上 均匀 分 布 . 令 $7! 是 正 态 积分 
LT / 。 (12 
5(z) = 去/ 。 p(_ 纪 /2)dt 


的 反 函 数 , 并 置 Ak = @ (UVh). 这 些 随机 变量 是 相互 独立 的 , 且 由 逆 概 率 变换 , 它 
们 服从 零 均值 和 单位 方差 的 正 态 分布 . 在 公式 (7.8) 中 利用 它们 来 构造 一 个 布朗 运 
动 过 程 . 这 样 , 我 们 利用 单个 均匀 分 布 随机 变量 V 作为 我 们 “随机 性 ”的 唯一 来 源 ， 
构造 了 整个 布朗 运动 ! 从 这 个 意义 上 , 布朗 运动 并 不 比 随机 地 抽取 一 个 数字 的 试验 
有 更 多 的 “随机 性 ”! 


B. 平方 变 竣 


令 X(t 是 标准 布朗 运动 , 我 们 不 再 证 明 X(t) 是 处 处 不 可 微分 的 , 虽然 前 面 已 
指出 此 事 为 真 . 然而, 我们 要 做 什么 才能 给 这 个 结论 以 支持 ? 对 于 每 个 固定 + > 0， 
我 们 将 建立 


如 站 (x (入 )| = Ca 


k=1 


这 个 极限 既是 在 均 方 意义 下 , 也 是 在 以 概率 1 收敛 (或 几乎 必然 ) 的 意义 下 进行 的 . 
对 左边 极限 , 模仿 初等 微 积分 公式 , 有 


| [ax np 一 了 一 / dr. 


| 圭 
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它 以 微分 的 形式 表达 即 是 [dX(t)? = dt! 初 看 此 式 , 很 自然 感觉 有 点 难以 置信 , 带 着 
强烈 期 望 , 小 心地 尝试 进行 分 析 验 证 , 以 预防 可 能 的 错误 . 在 迅速 进行 检验 之 后 , 并 
未 发 现 什 么 错误 . 事实 上 , 可 赋予 微 分 公式 [dX(t)] = dt 以 精确 的 意义 , 它 不 但 是 
正确 的 , 而 且 是 非常 有 用 的 . 然而 , 有 关 这 些 内 容 将 推 延 到 第 15 章 在 介绍 扩散 过 程 
时 再 讨论 . 

在 证 明之 前 , 我 们 先导 出 (7.10) 的 一 个 简单 的 推论 : 


X 贸 一 大 (每 1 = oo. (7.11) 
换 句 话说 , 布 骨 运动 轨道 的 全 变 差 是 无 限 的 (以 概率 1). 这 已 暗示 了 前 述 的 轨道 不 
可 微 的 性 质 , 但 这 并 不 等 于 证 明 这 个 性 质 . 全 变 差 的 无 限 性 可 从 下 面 不 等 式 推 得 : 


on 


lim >， 


k= 二 1 


| 
ee) 
上 面 右边 的 分 子 趋 于 t, 而 分 母 趋向 于 0, 因为 布朗 运动 的 轨道 是 连续 的 , 因此 在 有 


界 区 间 内 是 一 致 连续 的 . 故 左边 部 分 趋 于 无 穷 , 此 即 说 明 (7.11) 正确 
如 果 我 们 引入 一 些 简明 的 记号 , 平方 变 差 公式 的 证 明 会 变 得 方便 得 多 . 令 


k kl1 , 
A =X (六!) -xX (Et) 上 二 12 


Wikp = A2p 一 ti/2n， k=1,...,2". 


1 max 


了 一 1 


且 


2™ 2” 
我 们 希望 证 明 》 A24 一 二 或 者 相同 地 ，》 Whk 一 0. 对 于 每 个 m 在 {Wn} 中 
大 一 工 天 一 工 
的 随机 变量 是 独立 同 分 布 的 , 并 且 
EWnx] = EIA?Y] —t/2" = 0, E[W2,] = 2 /4". 
最 后 计算 涉及 正 态 分 布 Anx 的 四 阶 矩 . 事实 上 , 如 果 A 是 均值 为 0, 方差 为 o? 的 正 


态 分 布 , 则 E[A2"m] = 1x3x.…x (2m 一 1)o*™", 此 等 式 通过 对 正 态 特 征 函 数 进行 微 
分 容易 给 予 归 纳 证 明 . 显然 , 当 7 关上 时 , 有 BIWixn Wjin] = 0, 故 平方 和 式 , 可 得 


(Ee) | -amanele -wie 
k=1 Ek 二 1 


上 
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由 于 当 n 一 co 时 , 2t?/2* 一 0, 由 此 即 可 证 明 在 均 方 收敛 意义 下 所 希望 的 平方 变 差 
公式 . 为 了 得 到 以 概率 1 收敛 性 , 令 。 > 0 是 任意 给 定 的 , 应 用 切 比 雪 夫 不 等 式 知 


2 212 /TAN 
pr 2, Wo -| < 到 (3) ， 
了 nn 
由 于 >， 目 <oo, 依 Borel-Cantelli 引 理 知 , 只 有 有 限 多 个 n 的 值 , 能 使 Dw 
二 1 
成 立 . 由 于 s > 0 是 任意 的 , 我 们 必定 有 (以 概率 1) 


>E 


2n 
lim > TH 一 0 
k= 二 1 
这 等 价 于 在 几乎 必然 意义 下 平方 变 差 关系 式 (7.10). 
尽管 X(t) 是 不 可 微分 的 , 在 9.8 节 我 们 将 研究 诸如 | f(7)dX(7) 的 表达 式 的 


意义 , 我 们 将 定义 积分 为 近似 和 的 均 方 极限 . 一 个 更 加 一 般 的 随机 积分 将 在 第 15 章 
介绍 


C. 下 对 数 律 
著名 的 布朗 运动 重 对 数 律 最 重要 的 形式 指出 
ON 


为 一 个 必然 事件 , 或 者 等 价 地 , 是 一 个 概率 为 1 的 事件 . 它 有 多 种 变形 和 推广 . 例如 ， 
由 于 tX (1/t) 也 是 布朗 运动 , 我 们 有 


Jim sup XU 一 
tl 


o V2atinIn(1Jt) 


lim sup Xs) 


stoo V2sInlns = 
任 给 一 个 正 数 s, 一 方面 , 这 意味 着 不 管 取 多 大 的 值 s, 必 存 在 值 t > s, 使 得 


] 
EX > (1 -ee)v21nlnt, 


而 在 妨 一 方面 , 对 每 条 样本 轨道 , 只 要 选取 充分 大 的 s, 即 可 以 保证 对 所 有 + 上 > s 有 


1 
人 < (1+Eiv2inint 
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在 这 种 形式 下 , 重 对 数 律 对 于 下 面 本 质 上 其 实 很 简单 的 问题 提供 了 一 个 令 人 注目 的 
答案 . 对 任意 固定 的 t, X(t)/vt 是 均值 为 0 和 方差 为 1 的 正 态 分 布 , 所 以 


1 
Pr FX > eValnint | =1—®(kv2n Int), 


其 中 B(z) 是 正 态 积分 . 对 于 = 1 和 = 10”, 这 个 概率 是 非常 小 , 大 约 是 0.006. 
而 另 一 方面 , 推断 下 面 事件 : 是 否 存在 某 个 上 > 10” 可 使 


x0 > kv21nlnt 


的 概率 尽 可 能 大 ? 如 果 k > 1, 重 对 数 律 作 了 否定 的 回答 . 如 果 k < 1, 则 是 肯定 的 ， 
且 其 概率 接近 于 1. 
我 们 将 仅 证 明 重 对 数 律 的 一 半 , 即 以 概率 1 成 立 
X(t) 


‘meup rmman S 
为 此 , 我 们 先 对 非 负 款 


(7.13) 


2(s) = exp {ex 一 jos} ,ay>0 


应 用 最 大 值 不 等 式 , 当 a > 0,6 > 0 时 , 推 得 


k ] »。k aB _ap 
+t- -oo < 
pr | pow, exp {ex (mt) D0 Fn | >e | <e EZ2(t) 
= e-°P 五 [Z00)] 
= eh. 


对 每 个 n == 1,2,… 成 立 , 由 于 X(s) 的 轨道 是 连续 的 , 令 nn 一 oo, 得 


1 
eo > pr{ Sup exp {ex 一 jos| 、> | 


Catt 


-Pr sup {xa- jos| > 有 |， a > 0. 


Osct 


国定 值 0.0<0< 1 置 
h(t) = v2tlnln(1/t), 


对 € > 0, 选取 


a = on = (1+2e)0-"h(0"), B= pn = 5h(0"). 
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我 们 得 到 


ap=(1+2s)jninb =(1+2e)jinmc， 对 于 c=ln(17/ 人 ) > 0. 


这 样 , e-08 = (nc)-0+2e). 由 于 > (nc) Qt) < oo, 应 用 Borel-Cantelli 引 理 , 推 得 


nn 二 1 


了 
USuP， {x 一 zons| < 0 ， (7.14) 
上 式 对 于 除了 有 限 多 个 值 以 外 的 所 有 7 成 立 . 特别 , 我 们 可 以 断言 , 存在 某 个 整数 
N( 由 于 它 取 决 于 所 研究 的 特定 轨道 , 因而 是 随机 的 ) 使 得 当 n > N 时 , (7.14) 成 立 . 
如 果 t < 90”, 那么 , 当 te (6,60!) 时 , 我 人 有 n> N, 所 以 

Bn > sup { x) 一 ;ons 


DO<sct 


] 


上 
从 


angn 一 十 Oh 
= 二 (1 十 2E)g-1j(bn) 十 >h(0") 
1 十 2 2 
-3 = 十 +1) h(0"). 


由 于 h(t) 对 于 靠近 0 的 二 是 一 个 递增 函数 , h(9"*) < h(t), 即 有 
1 十 25 


X(t) < 5 | t+ 1 h(t). 
这 个 不 等 式 对 于 所 有 足够 靠近 原点 的 了 均 成 立 . 精确 地 说 , 对 所 有 t < bw 是 成 立 
的 . 于 是 , 以 概率 1, 成 立 
X(t) .1 {1+2e 
hmeup Trt < 3 6 + 


由 于 我 们 对 0 仅 施加 限制 0 < 6 < 1, 令 8 一 1, 可 得 


ol ol lr 


im sup Fe <l+e 


以 概率 1 成 立 . 既然 e 是 任意 正 数 , 故我 们 证 明了 (7.13) 所 撤 述 的 重 对 数 律 的 一 半 . 
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初等 问题 


在 下 面 问题 中 , X(t) 均 为 标准 布 明 运 动 . 
1. 设 To 是 不 超过 t 的 XX(7) 最 大 零点 , 试 证 明 


Pr{To < to} 一 = arcsin Vv to/t. 


提示 : 利用 定理 3.1. 

2. 设 了 是 超过 t 的 X(t) 最 小 零 操 , 试 证 明 
(a) Pr{Ti <t1} = = arccos Vt/ti. 

(bj Pr{To <to,Ti > ti} = ~ arcsin Vto/ti. 
3. 试验 证 E(X(t)X(s)|X(0) = 0) = min(t, s). 


4. 试 证明 密 上 度 函 数 
p(t, 火 ) y) 一 -总 exp| 一 (Z 一 y) /2 
满足 热 方程 
op 1 Op 
Bt 28z? 


5. 设 T(A) 是 X(0) = 0 条件 下 首次 到 达 入 > 0 的 时 间 . 试 证 明 了 (At 十 和 2) 的 分 布 与 
T(A1) 十 T(X2) 的 分 布 相同 , 其 中 把 TQ1) 和 (XA2) 看 为 独立 的 随机 变量 , 和 i, 和 2 > 0. 

提示 : 验证 办 ;+xz(0) = $a1(0)9ss(9), 其 中 8、(9) 是 由 等 式 (5.3) 所 给 的 T(A) 的 拉 普 
拉 斯 变换 . 


6. 试 确定 
U(t)=e 'X(e”), t>0, 
和 
V(t) = X(t) txX(1), Ogitg!1 

的 协 方 差 函 数 . 

解答 : 

EIU(t)U(s)) = exp{—lt — sl}, 

和 


EV(t)V(s) =t(1— s),t<s. 
7， 对 于 标准 布朗 运动 站 (t) 和 常数 a > 0,8 > 0, 试 证 明 Pr{X(t) < at + B, 对 所 有 
t > OX(0)=w}=1-e ?Hw 对 于 ws Bb. 
提示 : 应 用 推论 5.1 于 漂移 布朗 运动 W(t) = X(t) 一 at 一 w. 
8. 设 W = / X(syds, 试 证 明 EIW] = 0 和 EIW?] = #3/3. 
Q 
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提示 : 验证 


EIW’*l=E 


Loo) 
-EE { / x(waul | / xjdo|| 


- / / EIX(wX (wdudv 


=2f {f und ar 


9 试 推导 在 已 知 X() = = 条件 下 WW = X(s)ds 的 条 件 分 布 
提示 : W 和 X(t) 具有 联合 正 态 分 布 
解答 : 已 知 X(t) = = 条 件 下 , W 是 具有 均值 B[WIX(t) = 2] = 2tz 和 方 六 B|(w- 


B+) IX(8) = | = 1/12 的 正 态 分 布 . 384 


10. 设 工 是 布 关 运动 过 程 首 穿 直线 i!(t) = a+ Bt(a > 0,8 > 0) 的 时 间 , 试 求 了 的 拉 普 
拉 斯 变换 . 
提示 : 利用 (5.1) 的 第 二 个 靳 , 得 


E om {x + BT)— 27 一 1 


然后 进行 变量 替换 8 -- 5X2 = z 
11. 设 Y(t) = eX( 是 几何 布朗 运动 , 试 求 扩散 系数 


je BEE YOY = _, 


jim (Y), 0O<y<o, 


re SY CE+ A =Y (OPIYC) =y 


im = 一 4( 切 ,0 < < ooc. 


12. 利用 关系 式 (5.5) 求 下 面积 分 的 值 


”1 b 

/ 二 op{- (et+ 引 jd 0;,D > 0; 
”1 b 

/ 六 ep 人 - (ot+?)}at 


13， 试 证 明 : Pr{M(t) > 5X(t) = M(t)} = exp(~62/2t), 其 中 M(t) = max X(u). 
提示 : 令 了 人 提 = M(t) 一 XX(). 在 Y(t) = 0 条件 下 , 计算 M(t) 的 条 件 分 布 . 

14. 试 证 明 人 恒等式 

(i) 五 em 人 hh X(s)ds} ~ exp(A*t/6), ~o0 < 和 A<o, 
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(ii) 五 exp DL sX(s)ds | ~ exp(Mt°/15), 一 oo < 入 < oo. 

15. 设 R(t) = [人 (2 十 十 Xmn(t)3 27 是 径 向 布朗 运动 或 m 维 贝 塞 尔 过 程 . (a) 试 证 
R(t 一 mt 是 著 . (b) 利用 靳 可 选 抽样 定理 证 明 E[T = /mm, 其 中 了 = inf{t > 0; R(t) > ~} 
是 m 维 布朗 运动 [XXX 人] 首次 到 达 距 离 原 点 为 7 的 时 间 . 


问 题 
以 下 我 们 使 用 记号 
M(t) = max X(u), 
和 
Y(t) = M(t) — X(t), 
其 中 X(t) 是 标准 布 角 运动 . 


1. 试 证 明 Y(t) = M(t) 一 针 (t) 是 连续 时 间 马 尔 可 夫 过 程 
提示 : 注意 , 对 于 :<t+ 有 


Y(t) = max{ max (X (4) — XE)), YE)} ~ (X(t) — XE)). 
2. 试 证 明 随 机 过 程 Y(t) = M(t) -X(t) 和 随机 过 程 |X(t)| 是 等 价 的 . {两 个 过 程 等 价 
是 指 它 们 的 有 限 维 分 布 相同 .) 
提示 : 由 于 |XGb 和 Y(t) 告 为 马尔 可 夫 过 程 , 因此 只 要 证 明 密 度 函 数 
Pr{Y(t) < ylY(to) = yo,to < 和 Pr{[X(2)| < yl|X(to)| = yo,to < 


是 恒 等 的 . 

可 利用 问题 1 的 Y(t) 表示 式 计算 上 面 左 式 . 

3. 试 证 明 Y(t) 在 区 间 (to, 拍 ) 至 少 有 一 个 零点 的 概率 是 (2/7) arccos Vto/ti. 

4. 设 守 (下) 是 Y(r) = M(r) - X(r) 超过 (不 超过 )t 的 最 小 (最 大 ) 零点 . 试 证 明 76 
和 TY 分 别 具 有 与 To 和 歼 相同 的 分 布 . To 和 了 用 定义 见 初等 问题 1 和 2. 

5. 对 于 ap > 0, 试 证 


Pr{X{t) 在 (0,t) 不 为 0X(0) = a,X(t) = 绰 =1-e@ ?2%/t. 


提示 : 利用 (3.9) 的 函数 At(x,). 
6. 对 于 Qa,B > 0, 试 证 


Pr{X(u) <aut+p,0 <ug1X(0) = X(1) =0}=1-e +o 
提示 : 利用 定理 2.1 证 明 恒等式 


Pr{X(u) <aut+pd,0< us 1X(0) = X(1) = 0} 
= Pr{X(u) <O00<u < 1xX(0) = -ph,X(1) = -8— a}, 


然后 参考 虑 问题 5. 
7. 已 知 X(t) 在 区 间 (to,t1) 上 不 为 零 , 试 求 其 在 区 间 (to,t2) 上 不 为 零 的 条 件 概率 ,其 
中 0<togt st. 
答案 ， 
arcsin Vito/t2 
arcsin Vito/ti 
8. 试 证 明 在 已 知 X(t) 于 区 间 (0, 与 ) 不 为 零 条 件 下 , 在 区 间 (0,t2) 不 为 零 的 条 件 概 率 
是 Vti/t2, 其 中 0<ti< tz. 
提示 : 计算 


Pr{X(t) #00<to tto|X(t) 00<to <t gt}, 


然后 令 to 一 0. 
9. 试 证 明 : 已 知 X(t) 于 区 间 (to,t1) 上 在 点 如 或 与 取 到 一 极 值 [ 注 : X(t) 有 两 个 极 
值 ], 事件 |X(t1) -天 (加 )| > & 的 条 件 概率 是 exp( 一 £*/2(t1 -to0)),to > 0. 
提示 : 证 明 下 面 命 题 
(i) 问题 中 所 述 事 件 可 在 下 面 四 种 情况 之 一 下 发 生 :， (A) X(to) 为 最 小 , (B) X(to) 为 最 
大 , (C) X(t1) 为 最 小 (D) 和 二) 为 最 大 . 
(过 已 知 (A), (B), (C), (D) 中 任 一 个 情况 下 , 其 他 任 一 情况 发 生 的 条 件 概 率 为 0. 
(十) Pr{| 关 (#1) 一 X(to) > | (A), (B), (C), 或 (D) 发 生 } 
= >》 Pr{|[X(t1) ~ X(to)| > éla} 
a=(A),(B),(C),(D) 
x Pr{a|(A),(B),(C), 或 (D) 发 生 } 
= exp[—é°|2(ti ~ to)]. 


(利用 初等 问题 13 和 反射 原理 ) 
10. 试 证 明 


Pr{X(7)A00<t<rt<u<1X(0)= X(1)=0} 


和 arccos /一 上 
Zz u(l —t) 


2 [ Pr{X(t)=a,T(a)=7r-t,X(i -7)=0X(0) = 0} 
a VT 二 4 
x [Pr{X(1) = 0|X(0) = 0}] dadr， 


提示 : 计算 


其 中 T(a) 表示 布朗 粒子 从 X(0) = a 出 发 首 达 0 的 时 间 [ 见 (3.7)], 和 


a 2 arccos -一 
du | ull ~ 1) 


| 


386 


387 


348 第 7 章 布朗 运动 


=- -2 ( ] ) 有 
TV1I-{(u—t/ul—t 1—t/ 2vV1-— (t/u)u? 
V1 
T (Vi—u(VvVu 一 直人 


11. 证 明 恒等式 


em 人 / f(s)x(s)ds|| 
~ exp (> 人 Fu) 下 uf(wau| dp ，_oo<A<oo 


其 中 f(s) 为 任意 连续 函数 , 0 < s < oo. 
12. 证 明 Pr{X(1) < z|X(w) 20,0<ug1}=1- exp(-7r’ /2). 
提示 : XX'(t) 二 针 (1) 一 关 (1 一 发 也 是 布 关 运动 . 根据 X'(t) 所 求 概率 可 表示 为 
Pr{X'(1) < z|M'(1) = X' (1)}, 
其 中 M'(t) = max X'(z), 然后 参考 初等 问题 13. 
13. 对 于 a > 0,b < a, 证 明 


b+ X(t) | -2a(a—b) 
Pr « su 之 0a? 二 € ， 
{ p20 i+t 


然后 证 明 左 边 部 分 , 因此 也 是 右边 部 分 , 等 于 
Pr{ sup X(u) > alX{(1) = 0b}. 
Ut<utl 
14. 试 证 明 布 骨 运 动 的 科 尔 贷 戈 罗 夫 不 等 式 : 
Prf sup |X( > e} <t/e’, e>0. 
0 入 4 入 上 
15. ( 续 上 ) 利用 科 尔 莫 威 罗 夫 不 等 式 证 明 
lim, -X(t) -0. 


提示 : 置 e = 22"/3 和 t= 2", 并 利用 Borel-Cantelli 引 理 . 
16. 对 于 n= 1,2,.… 和 k= 二 1,.…,2", 置 


k k—1l 
aux ()-* (和 ) 
其 中 X(t) 是 标准 布朗 运动. 试 证 明 E[Sn+1|S] = (sn + 1), 其 中 Sn = 》 A2%， 


i 
提示 : 利用 定理 2.1 证 明 


. 给 . 类 
ElAnti2k-1 + Ant12p|X (7/2"),7 = 1 ,2"] = 3(Ank + 1). 
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然后 两 边 求 和 . 
17. 利用 问题 16 的 记号 , 证 明 E[S%|S%+1] = Sn+t1. 
提示 : 利用 对 称 性 证 明 
E[AnglAnt12k-1, Ant1,2k] 
= E[(Anti2k-1 + Ant1,2k) [Ans12k-1) Ant12k] 
1 ] 
一 5 (Antl2k-1 二 Ant1,2k) 十 5(An+l2k-1 ~— Ant12k) 
= Anyi2g1 + Anri2kg. 


18. 设 X(t) 是 标准 布朗 运动 , 对 于 e > 0 和 了 > 1, 今 ge.T(z) 表示 在 已 知 关 (t) > -ce( 对 
所 有 tT) 之 下 X(1) 的 条 件 概 率 密 度 . 试 证 明 


， /12 2 2 
lim ge,T(X) = /2 exp{(—2° /2). 


了 一 oo 


注 , 这 是 三 维 贝 塞 尔 过 程 中 R(1) 的 分 布 
19. 设 (有) = exp {09 一 3034} 于 是 {jo(X(),t) 对 任意 实 参数 9 是 鞍 利用 名 
fo(X(), 如 +f-o(X(), 加 ,其 中 9 = V2, 试 证 明 


_ 1 
Ele “| = 一 一 一 天 一 一 ， 
| cosh(V2Xa) 


此 处 T= min{t: X(t) = +a 或 X(t) = -a}. 
20. 署 
p(x,t) = exp(z /2t),t > 0， 


有 
试 证 明 p(XX(#),a 十 t) 对 于 任意 a > 0 是 团 . 
提示 : 验证 
十 oo 1 
pm) = ft) 
其 中 fo(z,t) = exp 长 一 Bo) 也 可 参考 (5.2). 
21. 利用 问题 20 中 的 团 和 堵 的 最 大 值 不 等 式 证 明 
Pr{|X()| > V2(a +t)InVa 直 ft， 对 于 某 个 t> 0j < 万 


22. 国定 a < 0 < 6b, 设 T(a)[ 分 别 地 , T(b)] 是 过 程 首 达 a( 分 别 地 , 首 达 昌 的 时 间 . 令 
1 =1 阁 T(a) < T(6); 其 他 为 0. 类似 地 定义 五 为 到 达 a 之 前 到 达 。 的 事件 的 示 性 函数 . 
试 证 


exp( 一 V2Xb) = Ef{lexpl—AT(O} + Et{lo exp{(—AT(a)} exp[—V2A(b — 0) 


exp(V2Ma) = Et{ls exp{—AT(a)]} + E{h exp[—AT(6)]} exp[— V2A(b — a)). 


Es 
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提示 : 第 一 个 方程 是 将 到 达 b 的 轨道 按照 是 否 首 先 到 达 a 分 成 两 类 . 然后 利用 


exp(—V2Mb) 一 五 lexp[— 和 AT(b)|X(0) = 0| 


exp[—V2A(b — a)] = Elexp[—AT(bNIX(0) = al. 
23. ( 续 上 ) 从 问题 22 所 导出 的 方程 组 中 求 出 E{I。 exp|— 和 AT(a)} 和 Et{lsexp[—AT(b)}}. 
令 了 = min{T(a),T(b)} 是 首 达 a 或 b 的 时 间 . 求 
Elexp(—AT)| = E {I, exp[—AT(a)]} + E{1; exp[—AT(b)}. 


24. 设 W(t) 是 带 有 正 漂移 参数 4 > 0 和 方差 o* 的 布朗 运动 . 令 M(t) = dDax, W(w) 

和 Y(t) = M(t) 一 W(t). 固定 a>0 和 w >0, 并 令 
T(a) = min{t: M(t)} =a}, S$(y) = min{t: Y(t) = y}. 
试 证 明 
P70) < SW)} = op { rp) 

提示 ; 令 f(a) = Pr{T(a) < S(y)}. 首先 论证 /al + az) = f(a1)f(az), 因而 对 某 个 常 
数 上 有 f(a) =e@ …”. 

车 入 一 —2p/02,e* X(t 一 es[M(t)— Y(t) 是 鞭 . 去 


T= min{T(a), s(y)} 


并 应 用 可 选 停止 定理 . 注意 M(T) = oa,Y(T) = 0, 若 T(a) < S(y);Y(T)=y, 若 T(a) > S(y). 
根据 T(a) < S(y) 及 T(a) > s(y) 两 种 情况 来 处 理 1 = Ele*IM(7)-Y(7)). 令 a 一 0 确定 未 
知 常数 . 

25. 设 {X(t),t > 0} 是 布朗 运动, 关于 9 微分 蒜 


Lelt) = expfgX(t) — (1/2)0t), 


证 明 对 每 个 mw H,(X(t),t) 是 园 , 其 中 
Hol(zx,t) = 1, 
Hi{z,t)= 27, 
和 
H(z,t) = rH i(z,t) — (n ~ 1)tH,_2(7,t). 
男 一 种 方法 可 利用 公式 (5.2) 完成 
26. 考虑 定义 在 实 直线 上 满足 下 述 条 件 的 连续 可 积 函 数 f: 


/ f(6)d5 =a>0. 
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构 阁 过 程 


YO) =| fa 
试 证 明 
lim BEIY(b] 和 lim BIY2( 
存在 并 求 出 它们 的 值 . 


27. ( 续 上 ) 试 证 明 : 
lim EI{Y(t)}] = pra 
其 中 jw 是 单 边 正 态 分 布 的 上 阶 矩 . ( 单 边 正 态 分 布 是 |2Z| 的 分 布 , 其 中 2 服从 标准 正 态 分 
布 .) 


附 记 
有 关 应 用 布朗 运动 于 统计 力学 和 数学 分 析 的 知识 学 习 , 我 们 推荐 kac 所 写 的 专 
著 加 


关于 扩散 过 程 杰出 的 专题 论文 是 Ito 和 Mckean[3], 他 们 完善 并 深入 地 推广 了 
Lévy 的 工作 . 


参考 书目 


[i] PP. Lévy, Processus Stochastiques et Mouvement Brounien. Gauthier-Villars, Paris, 1948. 

[2] M. Kac, Probability and Related Topics in Physical Sciences. Wiley, New York, 1959. 

[ 引 K. Ito and H. P. Mckean, Diffusion Processes and Their Sample paths. Springer-Verjag， 
Berlin, 1965. 
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第 8 章 分 支 过 程 


本 章 前 4 节 对 分 支 过 程 及 其 应 用 作 了 初步 介绍 . 从 8.5 节 至 8.11 节 进 一 步 介 
绍 了 它 的 各 种 推广 , 只 有 掌握 了 前 面 内 容 才 好 往 后 继续 学 习 . 看 只 有 一 个 学 期 时 间 ， 
后 面 的 几 和 可 以 略 去 . 


8.1 ”离散 时 间 分 支 过 程 


分 支 过 程 在 2.2 节 作为 马尔 可 夫 链 的 例子 已 介绍 过 . 马尔 可 夫 分 支 过 程 的 许多 
例子 出 现在 不 同 的 学 科 中 . 我 们 列举 一 些 比较 重要 的 ， 

(a) 电子 扩 程 请 

一 个 电子 扩 程 器 是 一 个 把 弱电 子 流 放大 的 装置 . 一 系列 金属 板 放 置 在 从 某 处 放 
射出 电子 的 路 线 上 . 每 个 电子 撞击 在 第 一 块 金属 板 上 , 产生 随机 数目 的 新 电子 , 它们 
又 依次 撞击 下 一 个 金属 板 , 并 产生 更 多 的 电子 等 等 . 设 Xo 是 初始 放射 出 的 电子 数 
目 , Xi 是 由 于 Xo 个 初始 电子 撞击 在 第 一 块 金属 板 上 产生 的 电子 数目 ; 一 般 地 , 令 
Xn 是 由 于 从 第 n 一 1 块 金属 板 放 射出 的 电子 撞击 在 第 ” 块 金属 板 上 所 放射 出 的 电 
子 数目 . 随机 变量 序列 Xo, Xi, 羡 2,… ,Xn,… 构成 一 个 分 支 过 程 

(b) 中 子 连锁 反应 

原子 核 偶 然 被 一 个 中 子 撞击 后 会 分 裂 . 裂变 结果 产生 随机 数目 的 新 中 子 . 下 一 
代 中 子 的 每 一 个 又 撞击 其 他 某 些 原子 核 , 产生 随机 数目 的 另外 一 些 中 子 , 等 等 . 在 这 
种 情况 下 , 中 子 的 初始 数目 Xo = 1. 第 一 代 中 子 包含 所 有 那些 由 于 初始 中 子 撞击 后 
发 生 裂变 而 产生 的 中 子 . 第 一 代 中 子 数 是 随机 变量 X1. 一 般 地 , 第 n 代 的 Xn 个 中 
子 是 第 n 一 1 代 的 Xn-1 个 中 子 各 有 目 随 机 撞击 原子 核 之 后 所 产生 的 . 

(c) 族 姓 的 继承 

族 姓 只 由 儿子 继承 . 假设 每 个 个 体 以 概率 pi 有 上 个 儿子 . 这 样 , 一 个 个 体 产 生 
出 第 一 代 , 第 二 代 , …, 第 n 代 , … 的 子孙 后 裔 . 我 们 可 以 研究 第 n 代 后 毅 数 目 这 
个 随机 变量 的 分 布 , 或 者 研究 绝 山 的 概率 . 此 问题 在 下 面 分 支 过 程 的 一 般 分 析 中 将 
要 涉及 . 

-《d) 变异 基因 的 存活 

每 个 基因 单 体 有 可 能 产生 出 上 个 后 代 ,k = 1,2,.…, 它们 是 同类 型 的 基因 . 然 

而 , 任何 一 个 单 体 有 可 能 变 成 不 同类 型 或 变异 的 基因 . 这 个 基因 可 以 成 为 多 代 特 定 
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变异 基因 的 第 一 代 . 我 们 可 以 研究 关于 在 原始 基因 群体 内 , 变异 基因 存活 的 可 能 机 
深 . 

上 述 各 例子 具有 下 述 的 构造 . 令 Xo 表示 初始 群体 的 含量 . 每 个 个 体 彼 此 独 开 
地 以 概率 px 产生 个 新 的 个 体 , 其 中 


cc 
pk 之 0,& = 0,1,2,..., 日 >_pk=1. (1.1) 
大 一 全 


初始 群体 的 直接 后 代 的 全 体 构成 第 一 代 , 其 数目 用 Xi 表示 . 第 一 代 每 个 个 体 又 独 
立地 产生 它们 的 后 代 , 其 数目 也 服从 概率 分 布 (1.1)， 所 产生 的 第 二 代 群 体 含量 为 
X2. 一 般 来 说 , 第 n 代 是 由 第 n 一 1 代 每 个 个 体 的 后 代 的 全 体 组 成 的 , 第 n 一 1 代 
的 个 体 也 各 目 独 立地 以 概率 pi 产生 个 后 代 (k= 0,1,2,…). 第 nn 代 个 体 总 数 为 
Xn. {Xn} 构成 一 列 整 数值 随机 变量 , 它 是 一 个 马尔 可 夫 链 . 


8.2 分支 过 程 的 母 函 数 表示 


我 们 将 导出 分 支 过 程 {Xn} 的 概率 母 函 数 的 几 个 关系 式 . 首先 假设 初始 群体 是 


入 
Xntl 一 > Er., 
rr 二] 


其 中 &(7 > 1) 是 独立 同 分 布 随机 变量 , 其 分 布 为 


Priér = k} = pk, k =0,1,2,..., Spe=1. 
kk 二 0 
我 们 定义 概率 母 函 数 为 
p(s) = 》 pks® 
k==0 
和 和 oo 
pn(s) = 》 Pr{Xn =k}st， 对 于 n=0,1,2,.…. 

k=0 

显然 ， 
Jo(sj 三 3 且 yp1(s) = p(s). 

进一步 有 


pnr+l(s) = >》 Pr{Xn+i = kjs* | 
大 一 0 
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= 22 Pr{ Xi = kiXn = NPr{ Xn = 人 上 
k=0 7}=0 
= 2 5" 2_Pr{Xn=j} :Prk + + = 由 
k=0 j=0 
= 》 Pr{Xn = 站- Prte + + 6€ =k}s®. (2.1) 
二 0 


由 于 &r(T -一 1,2, 四 ) 了) 是 独立 同 分 布 的 随机 变量 ， 并 具有 共同 概率 母 淆 数 p(s), 因 
此 其 和 &1 十 … +& 具有 概率 母 函 数 [lp(sj. 这 样 


Pn+1(8) = 2, Pr{Xn = j} (p(s)}. 
1=0 
但 右边 部 分 正 是 以 p(s) 为 目 度 量 的 母 函数 pn("). 因此 


Pn+1(3) = pn(P(s)) (2.2) 
迭代 此 关系 式 , 可 得 


Pnt+1(8) = pn(P(5)) = nip(p0s) = pn-i(p2(5)) 
= pn-2(p2(8(5))) = pn-2(93(5)). 


由 归纳 法 推 得 ， 对 任何 K 一 0, l, ,NN, 


Pnt+1(8) = Pn—k(Pk+1(8)). 


特别 ， 令 k=n— 1, 
pnt+1(3) = plPpn(s)). (2.3) 
如 果 我 们 改 设 Xo = io( 常 数 ), 由 于 Xi = 》 、&j, 因此 有 
7=}1 
pols) 三 sm 和 pa(s) = fp(sjj. 
此 时 我 们 仍 有 


Pnt+1(8) = pn(p(s 庆 ， 
但 (2.3) 不 再 成 立 , 
借助 于 (2.2) 可 以 计算 X 的 期 望 和 方差 . 若 无 另外 说 明 , 以 后 都 假定 Xo = 1. 
我 们 还 假定 


= ElXi] 和 .0 = VarlX1] = EIX1] [已 (让 
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存在 且 有 限 . 
显而易见 ，E[Xn] = pn(1)， 然 后 微分 (2.2), 并 置 s = 1 得 到 [由 于 yp(1) = 
lpnri(1) = pn (1). 迭代 之 , 推出 


of 三 wo) = [op ai) 一 [oO pn az 人 
用 归纳 法 , 得 
oO = [ID oa0) = 人 (D 
但 w() = = E[X1] = m. 因此 
El[Xnri] = rp? (2.4) 


为 计算 方差 Var[Xn+1l, 首先 应 注意 


pi(1) = 5 kk DPr{X, = k} = EIX2] — ELXn] = ELX2] ~ p,(1), 5 
上 二 2 


因此 
Var[Xn] = pn(1) + p11) 一 [on 
但 微分 (2.3) 两 次 并 置 s= 1 得 
pnt1(l) = "(Dlpa DF + ¥ (1)pn(l). 
既然 pg (1) = m 而 yp”(1) = E[XI] 一 BIX1]=o +m? 一 mm 我 们 有 
eg) = Mrm + mpn(l), 
其 中 M = o2 +m2 一 m. 由 归纳 法 得 


oun(D) = M{m®” + mT } + mp (1) = 
= Mf{m*”"+m" + +m"}. 


故 
Var[XnH] = (0 +m mm){m + ml tm +m tl -mnt 
nl 1 
= o2mn 一 一 一， 车 由 天 1， 
并 且 


Var[X = (n+lc2， 若 和 =1 
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于 是 我 们 证 明了 公式 . 已 LRC] = m" 和 
m"*—1 


2 ,nC—1 
wp ml 若 m 交 1 


no2, 大 m=1. 


这 样 , 方差 当 m > 1(m < 1) 时 是 呈 几 何 增加 (减少 ) 的 , 当 m = 1 时 是 线性 的 . 分 支 
过 程 的 许多 结果 都 具有 这 个 特征 . 


8.3 消失 概率 


我 们 来 确定 群体 最 终 全 部 消失 , 即 绝 灭 的 概率 : Pr{X = 0 对 某 个 n}. 显然 , 当 
Xn 三 0 时 , 对 于 所 有 > nn 成 立 X= 0. 

首先 注意 , 如 果 一 个 个 体 不 产生 后 代 的 概率 为 0, 即 po = 0, 则 不 可 能 出 现 消失 
情况 . 因此 在 研究 消失 概率 时 , 我 们 将 假设 0 < po < 1. 令 


qn = Pr{ Xn = 0} = pn (0). 


Gn+1 = Pn+1(0) = p(n(0)) = p(qn). (3.1) 
由 于 p(s) 是 严格 递增 函数 ( 它 是 一 个 非 负 系数 的 短 级 数目 pe < 1) 并 且 9 = 
oil = po > 0,g2 = p(q1) > yp(0) = qi. 假设 qn > gn, 则 gqntl = yp(qn) > 
P(gn-1) = gn. 这 就 归纳 地 证 明了 qi1,92,…,gn,… 是 单调 递增 序列 , 并 以 1 为 界 . 
因此 存在 极限 
T 一 lm gn 
并 且 0<7g<1. 既然 p(s) 在 0< s<1 是 连续 的 [在 s = 1 的 连续 性 可 由 阿 贝 尔 引 
理 (第 2 章 引 理 5.1) 推出 ], 在 (3.1) 中 令 n 一 oo 可 得 
T = P(A). (3.2) 
由 于 qn 是 在 第 ” 代 或 第 代 之 前 消失 的 概率 , 因此 r 是 最 终 消失 的 概率 , 并 
且 (3.2) 说 明 7 是 方程 


的 根 . 

我 们 现在 指出 + 是 (3.3) 的 最 小 正 根 . 令 so 是 (3.3) 的 正 根 . 则 qi = p(0) < 
p(s0) = so. 假设 gq < so, 则 由 (3.1) 有 qnti = yp(qn) < p(s0) = so. 因此 , 我 们 用 归 
纳 法 证 明了 对 于 所 有 7 成立 gn < so, 由 此 推 得 r = lim qn < so. 这 就 证 明了 7 是 
(3.3) 的 最 小 正 根 . 、 

不 妨 假设 po 十 21 过 11， 这 时 OO (5) = >》 K(K 一 pkRS2 一 > 0, p(s) 在 0 < 


k=2 


p(s)=s (3.3) 


1. 当 po > 0,po 十 Pl 二 1 时 , 最终 消 失 概率 为 1. 一 一 译 者 注 
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s < 1 是 凸 郴 数 . 所 以 , p(s) 的 图 形 与 倾斜 45° 角 的 直线 至 多 相交 于 两 点 . 我 们 知道 
9(1) = 1, 故 必 有 交点 (1, 1). 显然 可 能 有 两 种 情况 : 若 m = yp'(1) > 1, 则 图 形 p(s) 
在 s = 1 处 切线 的 斜率 超过 1 如 图 8-1, 此 时 0<x<1; 若 m= yp'(1) < 1, 则 在 
3 二 1] 处 切线 的 斜率 小 于 或 等 于 1, 如 图 8-2, 此 时 必定 有 7 = 1. 这 样 , 当 m < 1 时 
最 终 消 失 的 概率 为 1, 当 m > 1 时 最 终 消失 的 概率 小 于 1. 换言之 , 当 且 仅 当 每 个 个 
体 后 代 平 均 数 不 超过 1 时 , 消失 是 必然 的 . 


4: 


一 一 一 一 一 一 一 一 一 一 一 一 一 (1, 1) 


3 LS) |,(s) | 
Pp,(s) 


图 8-2 


此 外 , 对 于 0 < s < ,显然 有 p(s) < yp(7)( 见 图 8-2). 由 归纳 法 知 , 对 所 有 有 
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pn(s) < (0 < s 7). 人 但 yp,(s) > pn(0) = qn, 这样 9 < pn(s) < 令 n 一 00, 则 
有 


lim pn(s}=7, Osgn. 
—+O0O 


对 于 m > 1 的 情况 , 当 7 <s<1 时 ,我 们 有 7 < yp(s) < s<1( 见 图 8-1). 由 归纳 法 
知 


nT < pn(s) < on-i(s) < (tr<s<1). 


由 此 推 得 
im pn(8) 之 T. (3.4) 
此 极限 必 等 于 x， 因为 帮 lim pn(s) = a > 7, 则 wa < a, 但 由 于 关系 式 
Jim pnt1(s) 一 lim ylpn(s)), 此 时 (3.4) 式 中 的 收敛 是 不 可 能 的 . 上 述 的 分 析 说 
明 
lim wn(s) 一 和 对 于 0<s<l1. 


pn(s) 在 0<s<1 上 收敛 于 常数 7, 这 个 事实 蕴涵 着 在 级 数 
Pn(3) = 和 Pr{ Xn = k}s* 
类 一 0 


中 , 当 n 一 oo 时 第 一 个 系数 
Pr{Xn = 0} 收敛 于 z 
而 所 有 其 他 系数 
Pr{X = 上} 收 伍 于 0， 对 于 大 = 1,2,…. 


因此 , 不 管 m = EX1 > 1 实际 取 值 如 何 , 当 一 oo 时 第 ” 代 由 任意 有 限 数目 个 体 
组 成 的 概率 将 趋 于 0, 而 消失 概率 趋 于 +. 在 这 种 情况 下 , 我 们 说 当 n 一 oo 时 , 以 概 
率 1 一 x" 有 Xn 一 00. 
上 述 结果 也 可 作为 马尔 可 夫 链 一 般 理 论 的 推论 . 此 处 设 马 尔 可 夫 链 Xo,X1, X2， 
具有 单 边 吸收 璧 {0}, 由 于 i 和 j 是 自动 己 态 , 所 以 jim ph = 0,0 Si < oo 
在 本 节 最 后 , 我 们 指出 一 个 有 趣 性 质 . 当 已 知 Xn 时 , Xn+r(r 是 正 整 数 ) 的 条 件 
期 望 是 mm” . Xn, 即 E(Xn+r|Xn) 一 mAXn. 为 证 明 这 点 ， 首先 考虑 ”二 ] 的 情况 : 


及 


2 ove| = Xnbé; = mAXn. 


j=1 


E{Xn+ilXn} =E | 
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现在 假设 所 述 关 系 式 对 于 7 成 立 , 继而 证 明 对 于 7 十 1 也 成 立 . 


E{Xn+r+1i|Xn} 
一 五 { 五 |Xn+rT1I n+r， 到 mr 一 1 , Xnl|Xn} 
一 E{E[Xn+r+ilXntrl|Xn}, 


其 中 我 们 使 用 了 {X} 的 马尔 可 夫 性 质 . 但 


ElXntrtilXntr] = Xntr Mm, 


由 归纳 假设 得 
E{mXn+r|Xn} = mt xX, 
这 样 , 我 们 证 明了 
E{Xn4r|Xn} = Xnm” 对 于 r=0,1,2,..,n =0,1,2,... (3.5) 
现在 考虑 随机 变量 


W, = 2 n = 0,1,2,..…. 
7 
根据 (3.5), 我 们 有 


1 1 ， 
E{Wn+r|W,} 一 ntr ElXn+tr|Xn} 一 mnt+r 入 mn “7 二 W,. 
对 于 7,n = 0,1,2,.…, 我 们 有 
E{WntriWn, Whi , Wi, Wol 一 证， (3.6) 


由 此 说 明 {W}?%eo 是 一 个 拷 


8.4 例 子 


(i) 设 p(s) = po 十 pis,0 < po < 1. 对 应 的 分 支 过 程 是 纯 灭 过 程 . 在 各 个 周期 ， 
每 个 个 体 以 概率 po 独立 地 消亡 , 以 概率 1 一 po = pi 存活 . 

(ii) 设 p(s) = po 十 p282(0 < po < 1,po 十 pz = 1). 这 是 对 应 于 下 面 分 支 过 程 的 
概率 母 隆 数 , 在 此 过 程 中 每 一 代 的 每 个 个 体 或 者 消亡 或 者 被 两 个 后 代 所 代替 . 

(这 ) 考虑 这 样 一 个 例子 , 每 个 个 体 分别 以 概率 p 和 9g 产生 六 个 或 0 个 后 代 . 这 
样 po = g, pn = p, 并 且 对 于 大 关 0,Npk = 0. 则 


p(s) =9g 十 ps (4.1) 
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(iv) 每 个 个 体 有 个 后 代 , 其 中 是 具有 参数 为 N 和 2 的 二 项 概率 分 布 , 则 
p(s) = (9 十 ps). (4.2) 


(v) 关于 本 章 开 头 描述 的 例 (d), 常常 假设 变异 基因 具有 个 直接 后 代 (k = 
0,1, 2……) 的 概率 服从 均值 为 入 = 1 的 泊 松 分 布 , 则 w(s) =e:** 且 A=1. 

选择 此 分 布 的 理由 如 下 . 在 许多 群体 中 , 虽 有 大 量 受 精 卵 (受精 蛋 ) 生成 , 但 仪 
有 少 部 分 发 育成 熟 . 受精 事件 和 不 同 受精 卵 的 成 熟 服从 独立 二 项 分 布 律 . 试验 的 次 
数 ( 即 受精 卵 的 数目 ) 是 非常 大 的 , 故 实际 成 熟 后 代 的 数目 遵循 泊 松 分 布 . 在 罕见 变 
异 基因 群体 增长 问题 中 , 此 模型 是 十 分 适当 的 . 如 果 变 异 基 因 具 有 某 种 生物 学 上 的 
优势 (或 劣势 ), 则 其 概率 分 布 可 取 为 均值 入 > 1( 或 入 < 1) 的 泊 松 分 布 . 此 时 ， 


p(s) 一 ee 


并 且 当 且 仅 当 入 > 工时 有 0< 关 < 

在 一 个 变异 基因 的 异 源 群体 中 , 我 们 可 以 假设 后 代数 目的 概率 分 布 是 泊 松 分 布 ， 
但 其 均值 也 是 一 个 随机 变量 . 

例如 , 我 们 可 能 有 一 个 很 大 地 域 , 在 每 一 块 子 区 域 发 生 分 支 过 程 , 它 由 参数 为 》 
的 泊 松 分 布 的 概率 母 函数 所 刻 划 . 此 外 , 我 们 假设 和 的 值 依赖 于 每 块 子 区 域 , 并 有 旦 
在 整 块 地 域 上 , 其 分 布 服从 工 分 布 . 从 形式 上 , 我 们 假设 一 个 变异 基因 恰 有 上 个 直 
接 后 代 的 概率 由 下 式 给 出 : 


(4.3) 


A* 
kl 


其 中 和 本 身 是 服从 工 分 布 的 随机 变量 , 其 密度 函数 为 


(g/p)j*X 4 
FOV) = | re ep -22) ， 对 于 入 之 0， 


0, 其 他 ， 
其 中 g,p,a 是 正常 数 , 并 且 g 十 p= 1. 一 个 个 体 具 有 大 个 直接 后 代 的 概率 是 


prfé=A}= 人 Pre= HOCd) 
上 式 是 关于 参数 和 \ 求 平均 的 . 因此 , 其 母 函 数 是 


px 一 6 k = 0,1,2,.…., 


p(s) = 2 Pr{é 一 js 


= 六 exp( 一 六 1 exp (人 dA .3 
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RC i A 
-| exXp( 一 入 ) ra p( ?| 过 i ha 


K 一 0 


/fap 
-| pt (Er 外 | TO 
四 gq/p an 
(可 人 
我 们 知道 这 是 负 二 项 分 布 的 母 函 数 . 
(vi) 在 例 (六 ~(iv) 中 , 我 们 并 不 知道 第 nn 代 概 率 母 卫 数 pn(s) 的 简短 形式 的 表 


达 式 . 经 过 全 面 分 析 , 下 面 剖 杭 的 例子 是 正确 的 . 特别 地 , 我 们 可 求 出 第 n 代 概 率 母 
函数 的 表达 式 . 设 


并 且 


其 中 bc>0 和 58 十 c<1. 我们 有 


b ] 一 已 一 
po=1-5》c =1-- 一 
并 一 


1 一 eC 1 一 ee 
而 对 应 的 概率 母 淆 数 是 
p(s)=1— 一 十 bs 2(co) - - -+ 0 2 (4.4) 
注意 , p(s) 是 如 下 线性 分 式 变换 的 一 种 形式 : 
fa) = St, oo -Py#0 (4.5) 


我 们 列 出 后 面 要 用 到 的 线性 分 式 变换 的 几 个 初等 性 质 : 
(i) 送 代 线性 分 式 变换 仍然 是 线性 分 式 变换 , 因为 如 果 f(s) 是 由 (4.5) 定义 的 ， 
通过 简单 的 代数 运算 得 到 


a(y+B)+(a6 + 6’)s 


f(f(s)) = Qa6 + yi +6 +6)s 


(ii) 方程 f(s) = s 总 存在 两 个 有 限 的 解 (可 能 相等 ). 此 解 称 为 f() 的 固定 点 . 
如 果 f(s) 是 一 个 概率 母 函 数 , 则 S51 = 1 必 是 其 中 一 个 固定 点 , 并 且 另 外 一 个 固定 
点 so 小 于 、 等 于 或 大 于 1, 分 别 对 应 于 (1) 大 于 、 等 于 或 小 于 1. 


401 


402 


403 
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对 于 由 (4.4) 给 出 的 母 函 数 , 可 以 通过 代数 方法 直接 验证 第 二 个 固定 点 是 
g _ 1~b—e 
”cll-e)’ 


其 中 c>0,b+c<l1. 
(ii) 对 于 任何 两 个 点 Si,i = 0,1, 显而易见 有 
f(s)— fs) 76-o6 


3 一 5i (7 十 6s)(7 十 6si) 
I f(s) - f(so) 6 
8)—Jj(s0) 17 十 9351 5 一 30 
1 于) (2) a 
如 果 令 so 和 si 是 f-) 的 两 个 (不 相等 的 ) 圈定 点 , 并 记 w = f(s), (4.6) 变 成 
W580 3 $0 
W—81 8— 81 (4.7) 
其 中 , 通过 设置 s = 0 大 可 以 由 (4.6) 及 (4.5) 得 到 . 后 者 计算 较为 简便. 
利用 (4.7), 我 们 易于 得 到 f(s) 的 迭代 值 f(s) = Wh,: 
Wa— 30 II 30 2 一 530 
W2 一 81 8) =« (“和 a) 
并 且 , 一 般 地 有 
0 pn (4.8) 


Wn — 81 8 一 81 
对 于 由 (4.4 给 出 的 几何 分 布 的 母 函 数 , 注意 到 固定 点 是 so = (1 一 pb 一 c)/c(1 一 o) 


各 31 二 1, 我 们 得 


站 (1 一 加 _ 


1 

b m’ 

其 中 m 是 此 几何 分 布 的 均值 . 对 于 m 去 1, 两 个 固定 点 so 和 1 是 不 同 的 ; 因此 在 
(4.8) 中 解 Wh, 得 : 


_ so (Vmr)ls—so)/e-D) 
wn = /ml /sD "#1 (4.9) 
此 式 可 改写 为 


pnls) 一 1 一 和 nn ( 1 ~ so ) + m”|(1 一 30)/(m” _. so)jl2s 


m™ 一 so 1 — [Gm* — 1)/(m" — so)ls 


(4.10) 
因此 , 第 了 代 消 失 概 率 是 


1 - 
Pr{Xn =0}= pn(0)=1-—-m (去 计 ) . 


mm" 一 30 
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注意 , 大 令 n 一 co, 这 个 表达 式 当 mm > 工 收敛 于 so, 当 m < 1 收敛 于 1. 将 (4.10) 简 
如 果 我 们 定义 消失 时 间 了 为 使 得 X = 0 的? 的 最 小 值 , 即 首 达 状 态 0 的 时 刻 , 则 


Pr{T' < n} = Pr{X, = 0} = pn(0), 
因此 ， 
Pr{T =n}= Pr{T < n}—Pr{T <n-1}= (0) — pn_1(0). 
在 m1 的 情况 下 , 我 们 有 


PAT =n}=1—m" ( -二 80 ) -+ -50 ) 


Mm" 一 30 ml1— so 

ni—l (m 和 1)(1 30) 
号 Ee 
(pn — so)(m"-1 — so) 


一 7 


， 对 于 n= 1,2,.…. 


如 果 m= 1, 则 b= (1 一 c)? 并 且 方 程 p(s) = s 具有 重 根 s = 1, 而 没有 其 他 的 
展 , (1 — oe)? (2c— 1) 
— Cc}*sg Cc— (2c— lls 

PW) et To 7 i 


9 


并 且 


加 _c—(2c—1)l(c—(2c—1)s)/(1—cs)) 2c—(3c—1)s 
p2(s) = pp(s)) = l—cl(c—(2c—1)s)/(l—ces) 1+c—2cs ’ 


由 归纳 法 得 


pn(8) = nc— I(n+ lc- ls (4.11) 


1+(n 一 tc 一 mcs 
在 m=1 的 情况 下 , 消失 概率 为 


PriX = 0 = pn(0) = TF ye 对 于 n= 1,2,.…… 
且 消 失 时 间 人 的 分 布 为 
PHT=n}=— De - c(1 一 中 
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我 们 把 前 面 结果 推广 到 二 维 情况 . 考 虚 某 生物 群体 或 某 研 究 对 象 全体 , 其 中 有 
两 种 类 型 的 个 体 可 区 分 . 每 一 种 类 型 个 体 都 可 能 独立 产生 两 种 类 型 的 后 代 个 体 . 设 
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Un 和 你 分 别 是 第 王 代 工 型 和 II 型 个 体 的 数目 . 我 们 有 如 下 表示 式 : 


U,, V's, 
2 
Un+1 -一 》 | 十 D & ) 
j=1 j=1 


LUn Vn 
1 2 
Wn = D0 + 0 
j=1 j=1 


此 处 (& 中 ,CW) 是 独立 同 分 布 的 随机 向 量 , 其 分 布 律 为 


Prfe = 有 一 中 = pi(k, Ll), k,l 一 0)12 7 一 1 2 一 1,2. 


这 里 , pi(k,!)>0 且 3 pi(k,!) = 1,1 = 1,2. 
k,1=0 
换言之 , pi1(k,1!) 和 po(k,?) 分 别 是 1 型 和 I 型 的 单个 体 产生 十 1! 个 直接 后 代 
并 且 天 个 是 工 型 而 ! 个 是 工 型 的 概率 . 
假设 过 程 初 始 时 刻 仅 有 一 个 个 体 , 即 或 者 


Uo=1 和 WW=0 (5.1) 
或 者 

Uo=0 和 Wo=1. (5.2) 
下 面 我 们 引入 一 对 二 维 概率 母 函数 


OO 
pO(s,t) = Y pik,l)st .tH, i=1,2, 
大 一 


Bh， 


ph (sd) = 》 Pr{Us = kV = lVo = 1,Vo = 0}st th, 
kK,l=0 


oo 
pe (s,t) 一 2》 Pr{U, 一 k, Vn = liUo = 0, Vo = 1}s* .+ 
k,i=0 


显然 , (5.1) 的 母 旺 数 是 
p89 (8,t)=s, 


及 (5.2) 的 母 函 数 是 
pe (s,t) +t. 
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而 且 ， 
pi (s,t) = p(s,t), i=1,2. 405 


类 似 于 一 维 情形 , 可 以 证 明 对 于 1= 1,2 和 n,m = 0,1,2,…, 成 立 
Pid mls1t) = pO (pt) (s,t), pl (s,t)). (5.3) 


此 式 与 (2.3) 二 维 情形 相当 . 
为 推广 公式 (3.5), 我 们 引入 下 面 记号 . 设 其 , = (Un, WW) 是 具有 分 量 Un 和 VV 
的 二 维 阿 量 . 记 
mil = E{UilUo = 1,W = 0} = BEE, 
mi2 = E{VilUo = 1,W = 0} = EC), 
m21 = E{UilUo = 0, Vo = 1} = BEE), 
m22 = E{VilUo = 0, WV = 1} = Ec. 


引入 期 望 距 阵 


Ml 7212 
Tt21 Ti22 


这 样 , mii 和 il? 分 别 是 由 单个 工 型 个 体 产生 的 式 型 和 I 型 后 代 的 期 望 数 . 作为 式 
(3.5) 的 推广 , 我 们 有 和 矩阵 恒等式 


E[Xn4r| 站 | = 二 六 .MM"， 对 于 7,n=0,1,2,.…. (5.4) 
上 式 当 7 = 1 时 的 证 明 可 直接 进行 如 下 : 
U,, Vn U,, 
E[Xn4i|XX,] = [ 间 E+ (0 由 | 间 CD + 3 CH (Ur, 有 ) 


-1 j=1 I] 二 1 
一 (mii1Un, 十 ma2lVn, mi2Un, 十 m22 Vn,) 


= (Un, V) Wil M12 


m21 M22 
一 入 nn …A4. 


现 假设 式 (5.4) 关系 式 对 于 7 成 立 , 继而 证 它 对 7 十 1 也 成 立 . 由 {下 。} 的 马尔 可 夫 
性 , 我 们 有 
E[Xntrti|Xn] 一 E{E[Xnrti| ntr, 3 泪 nj| 汪 n.} 
一 E{E[Xn4rtilXn+r]|X.,} 一 E{Xn,+rMIX.,} 
和 E{Xn+r|Xn} -M (由 归纳 假设 知 ) 


一 ,M+tl. 


i 


407 
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这 就 归纳 证 明了 (5.4). 
对 于 二 维 分 文 过 程 , 我 们 也 可 引入 消失 概率 : 
7 = Pr{Un = WV =0 对 某 个 n|Uo = 1,W = 0), 
丰 (2) 一 Pr{U,, 一 VV 一 曲 对 某 个 niUo 一 0, Vo 一 1}. 


一 维 情形 有 关 结 果 可 以 推广 到 二 维 情况 , 此 时 应 注意 在 二 维 情况 下 期 望 m 所 起 的 
作用 由 期 望 矩 阵 W 的 最 大 特征 值 p 代 圭 . 
建议 读者 可 先 阅读 附录 有 关内 容 , 特别 是 Frobenius 定理 , 该 定理 指出 , 如 果 M 
的 每 个 元 素 都 是 正 的 (用 符号 表示 为 M 六 0), 则 其 最 大 特征 值 是 正 的 且 为 实 的 . 此 
特征 值 记 为 p(M) = 2. 
为 方便 表示 , 我 们 引用 如 下 向 量 记 号 : 
w= (s,t), 
bu) = (pV (8,t), p(s,t)), 
bn(u) = (pr (s,b), pm (s,t)), 
= A, Tr(2))， 
1=(1,1). 
于 是 我 们 可 叙述 
定理 5.1 假设 p(w) 的 分 量 是 s 和 上 的 非 线性 函数 且 M 交 0(M 中 每 个 元 
素 都 是 正 的 ), 大 M 的 最 大 特征 值 p 不 超过 1 则 m=1, 若 p>1 则 7 < 1. ( 注 : 
记号 4 vw(u < v0) 表示 wv 一 4 的 每 一 个 元 素 都 是 正 的 , w < wv 表示 wv 一 4 的 每 一 个 
元 素 都 是 非 负 的 .) 当 p > 1 时 , 7 是 下 面 方程 最 小 非 负 解 : 
U= Bu), U1. (5.5) 
证 明  ” 先 考 虑 情况 p < 1. 根据 马尔 可 夫 链 的 一 般 理论 , 如 果 链 只 有 一 个 吸 
收 状 态 , 从 某 状 态 出 发 可 以 到 达 吸 收 状态 , 则 这 个 出 发 的 状态 便 是 瞬 态 .二 维 过 程 
Xn = (Un, ) 正 是 这 样 一 个 过 程 : 原点 是 仅 有 的 吸收 状态 , 并 且 可 从 所 有 其 他 状 
态 到 达 吸 收 状态 . 这 是 由 于 b(w) 没有 线性 分 量 并 且 p < 1. 这 样 , 除了 原点 外 , 每 一 
个 状态 都 是 瞬 态 . 看 |Xa| = Un 十 Vn, 则 对 任意 正 数 入 有 
Pr{0 < |Xn| < N 有 无 限 多 n} =0 
(参见 第 2 章 定 理 7.1.) 上 式 意味 着 


Pr{|X ,| — 0} 十 Prfl 天 -| 一 00} = 二 
由 公式 (5.4) 有 [六 |XX0] = 三 oM “而 附录 定理 2.3 断 言 , 当 m 一 oo 时 , (1/p")M" 
的 各 分 量 收敛 . 因此 , 在 p < 1 的 情况 下 , 当 n 一 oo 时, [Xn|XXo] 各 分 量 仍 有 界 ， 
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由 此 推 得 事件 | 外 ,| 一 co 出 现 的 概率 为 0. 所 以 Pr{| 关 n| 一 0} = 1, 或 等 价 地 , 当 
n 一 oo 时 以 概率 1 有 Un 一 0 和 Wr 一 0 成 江 . 这 样 ,者 p< 1, 则 


Tt =A 一 1 
下 一 步 考 虑 情况 p > 1. 由 公式 (5.3), 当 s 二 t=0 时 有 


p01(0,0) = pp (0,0), p20(0,0)), i= 1,2. (5.6) 


心 


a -一 p20 (0, 0) 一 Pr{U,, — VW 一 0|Z0 之 ] ， Wo 一 0}, 
ge) = p20(0,0) = Pr{U, = VW, = 0lU = 0,W = 1}. 


则 (5.6) 可 改写 为 
qi1 = op (gh, g), i=1,2. (5.7) 


由 于 p 中 (s,t) 关于 变量 s 和 t 是 递增 的 , 且 若 s,t 均 增 加 旦 严格 递增 时 , 由 gq? = 
p47(0,0) > 0,i = 1,2, 我 们 易 得 


ql) = poG(g0 ,92) > ph) (0,0) = gq , 1=1,2. 
由 归纳 可 得 
git1 = pO (qd), 9) > pO (gi, 81) = gd, i=1,2. 
因此 , 对 于 每 个 i = 1,2,q%’ 构成 一 单调 增加 且 上 界 为 1 的 序列 , 且 
lim gr =Tt <1, i=1,2. 
在 (5.7) 中 令 n 一 oo, 则 得 
Tt = pO (A xD) = 1,92, 


或 用 向 量 记号 : r = p(w). 现在 我 们 证 x < 1, 且 在 所 述 条 件 之 下 , 它 是 (5.5) 唯一 
的 解 . 根据 泰 勤 定理 在 点 (1.1) 处 展开 p4(.,.), 有 


pl(s,H 
(1 一 81 一 有 一 0 | Pr 9 
PH (1 —s,1—t)=pn (l,l) ( 5 a 3 
~ {Ser (8d) t+ ol|s| 十 上 内 |) (5.8) 
Ot s==t=1 


a 
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上 式 对 于 |1 一 s| < 1,11 一 t < 1 及 s,t 足够 小 时 正确 . 其 中 符号 o(.) 表示 当 |sl+lt 一 0 
时 [olls| + |)]/(ls| + 乓 ) 一 0. 此外. 


Op (s,t) 
Os 


,= ElUnlUo = 1,W =0) = m(™), 


5 二 + 二 


Op (s, t) (n) 

Ba pe 一 五 [人 |20 一 ] Vo 一 0] = 12 

8pi (s,t) (n) 

Op (s, t) 

Dy pl 一 ElV.|Uo 一 0, Vo 一 ] 一 my), 
我 们 可 把 (5.8) 写 为 阿 量 形式 
pn(l—u) = 1- Mu +o(ls|+|t)), (5.9) 
其 中 
mi? ,mi2 


(n) 
M - (n) (nn) 


且 lul < e. 显然 , 由 关系 式 EE[ 半 | 革 0o] = 是 0oRM 可 得 MW = IM"， 设 向 量 
v = (v1,v2) 的 绝对 值 定义 为 各 坐标 分 量 绝 对 值 之 和 : |v| = |w| + 1vz|. 我 们 证 明 , 倘 
若 以 之 o, 对 于 足够 大 的 n, 有 


Au > 2|ul, w= (s,t). (5.10) 


0,.0 0 0 
121 Tiys 
0 

Toy1 Loy 


其 中 p 是 M 的 最 大 特征 值 , 并 且 zx? = (73,23) 和 名 = (人 外, 驳 ) 表示 是 唯一 的 (可 
相差 一 个 常数 因子 ) 左 和 右 的 正规 化 正 特 征 向 量 使 得 x22y9 + 23 奴 = 1. 至 于 o(p") 
的 意义 是 通常 意义 下 的 推广 , 即 当 n 一 oo 时 , (o(p"))/p” 的 分 量 都 趋 于 零 . o(p") 不 
依赖 于 4, 它 表示 当 Ag /on 收敛 到 极限 时 的 误差 项 . 我 们 改写 上 述 表达 式 为 


‘w+ o(p")u, 


M"u= p"(ys+yt)r" +o(p")u, v= (s,t), 
日 大 4 之 0, 我们 得 到 估计 式 


EM > p” [2Y + x3] min(yi, y2): ul + o(p™ )ul. 


I 
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由 于 p > 1 选择 n 足够 大 即 得 (5.10) 成 立 . 综合 (5.9) 和 (5.10), 者 1>4>0,|u| 
充分 小 以 及 足够 大 时 , 例如 n > no, 我 们 导出 


1 ~ pn(l — 4)| > 2|ul, 
令 v=1 一 4% 则 对 于 0<sv<1,|l1-v|<e 和 n>>no, 有 
1 — pro)| > 2|1 — wl. (5.11) 


现在 我 们 利用 (5.11) 来 证 明 mw < 二 假设 r = 二 即 zx = 1,i = 1,2， 此 时 
gt = gp 四 (0) > 0 当 n 一 00 时 通 近 于 1. 由 (5.3), 我 们 有 


prtn(0) = pn (Pr (0)). 


1— bn(0)| =|1— Bn,(Bn(0))| > 211 — By (0)) (5.12) 


仅 当 |1- bw(0)| < < 时 成 立 , 后 者 当 N 足够 大 时 能 够 实现 . 然而 , 关系 式 (5.12) 与 
假设 当 n 一 co 时 pl)(0) 趋 于 1 矛盾 . 这 样 r(0) = C3) = 1 是 不 可 能 的 . 现在 假设 
rt <1 和 rto2) =1. 那么 

rd) = .po(D(rGD ,1) 


且 
1 = 7 = p00) (x, 1). 


于 是 , 我 们 有 
pL (1, i) 二 1 和 pm) 1}=1, 


其 中 Xt < 1. 由 于 gp 扩 (s,t) 关于 s 是 单调 的 , p23(s,1) 在 区 间 rm < s < 1 必须 
是 常数 ; 所 以 
Op2) (s, 1) 


=0， 当 ruXsX1 
Os 


YT (2) _ Op (s,t) 
0s ll J 

显然 , 这 与 我 们 假设 M 交 0 了 矛盾. 用 类 似 方法 可 推 得 7( = 1,rt2 < 1 也 是 不 可 

能 的 . 这 样 邑 证 得 x < 1. 下 面 证 明 7 比 其 他 正 的 固定 点 都 来 得 小 . 设 x* > 0 满足 

gm) = T 由 单调 性 知 , 我 们 有 7* = bm) > 81(0,0), 由 迭代 得 zr* > 办,(0,0)， 

取 极 限 后 即 得 到 所 和 希望 的 结果 : mr* > 7. 恒 
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我 们 可 以 进一步 加 强 定 理 5.1 的 结果 . 

定理 5.2 ”在 定理 5.1 的 假设 下 , 如 果 g 是 单位 正方 形 上 除 1 之 外 任意 向 景 ， 
则 lim $n(q) = 

证 明 首先 假设 0 < gi < 1(i = 1,2). 若 N 是 正 整数 , 则 pt (gq) 的 泰勒 展开 
式 可 表 为 如 下 形式 : 


pi(g) =Prf|Xa|=0lpo=1m=0) 
+ 》 Pr{X»= zlUo=1,W = 0}()(q)” 
0<|X|I&N 
+ 》 Pr{Xn = zlUo=1,W = 0}(9)" (2)22. 
IXI>N 
上 面 后 一 个 和 式 有 界 于 (max(g!',g*)) Pr{|Xn| > N} < (max(g!,q*))”， 由 于 
max(g!,q?) < 1, 因而 当 N 一 oo 时 , 此 界 趋 于 0. 
因为 任何 有 限 非 零 状态 都 是 瞬 态 , | 苹 。| 或 趋 于 0 或 趋 于 co. 所 以 , 当 了 一 oo 
时 第 一 个 和 式 的 每 个 系数 均 趋 于 0. 由 此 推 得 当 n 一 oo 且 NN 固定 时 , 第 一 个 和 式 
趋 于 0. 这 就 证 明了 


im pU)(a) = lim Pr{|X»|= 0lUo = 1,W = 0} 
= lim 8)(0) = zd. 
类 似 可 证 
lim yO) (gq) = Te 


若 gt (i = 1,2) 有 和 且 仅 有 一 个 等 于 1, 则 91(q) = (yp1(q), yp*(g)) 确定 每 个 分 量 均 为 
严格 小 于 1 的 非 负 向 量 . 我 们 对 $1(q) 使 用 上 述 的 分 析 方 法 , 得 


im $,(91(9)) = 7 = lim $nri(g). 国 


推论 5.1 方程 (5.5) 的 非 负 解 必 是 1 和 7. 


8.6 ”多 维 分 支 过 程 


在 细节 上 作 些 修改 , 可 把 前 一 节 的 结果 推广 到 多 维 分 支 过 程 . 它们 的 证 明 过 程 
并 无 新 鲜 东 西 . 以 下 我 们 仅 列 出 结果 , 勤奋 的 读者 可 补 出 详细 证 明 . 

我 们 考虑 由 p 个 类 型 构成 的 分 支 过 程 , 不 同 的 类 型 对 应 于 生物 实际 不 同 的 变异 
形式 , 也 可 看 作 单 一 生物 的 不 同年 龄 或 其 他 某 个 性 质 . 限制 类 型 数 为 有 限 值 的 要 求 ， 
不 妨 可 解释 为 我 们 把 年 龄 分 为 有 限 多 个 年 龄 段 
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在 宇 密 射线 的 电子 一 光子 级 联 中 , 不 同类 型 可 以 解释 为 光子 的 不 同 能 量 等 级 . 
与 类 型 i 相 联系 的 是 概率 母 函 数 


Co 


(8s1 ,sp) 一 》 DB 人 (ri ,Tp)s1! ,+ , S77, 
Tr1,°" Tp=0 
lsi| 1%,|sp| < 1 i=1,..,9. 


其 中 pt(r ,rp) 表示 一 个 i 型 单个 体 产 生 ni 个 1 型 , ra 个 2 型 ,…rp 个 p 型 后 
代 的 概率 . 

引入 向 量 记号 : 8 = (s1,…, 8p). 

设 fi (s) 表示 由 一 个 i 型 个 体 产生 第 n 代 的 概率 母 沙 数 . 类 似 于 (5.3) 我 们 有 


fe (8) = FO(FD (8), 0)(8),:7, FP) (8)), f(s) = sn=0,1,.,i= 1,...,p, 
设 2 = (2A,…, 2)) 表示 第 n 代 群 体 各 型 ( 共 p 个 型 ) 个 体 含量 的 向 量 . 类 似 于 


(5.4) 有 
: ElZntimlZn| = ZnM", 


其 中 M = [ma 是 一 阶 害 矩阵 ; 
Of 


Miiy 一 ElZY |Z0 = €i| = De, 
] 


(TD 


此 处 ei 表示 第 i 个 分 量 为 1 其 余 分 量 为 0 的 向 量 

下 来 我 们 来 叙述 对 于 p 维 分 支 过 程 类 似 于 定理 5.1 的 结果 . 假设 对 所 有 i,j, mi; > 
0. (只 要 对 某 个 n 和 所 有 i, 有 mM > 0 即 足够 .) 设 x 人 表示 初始 时 刻 只 有 一 个 i 
型 . (i = 1,…,p) 个 体 时 的 消失 概率 , 即 


rt = Pr{2 = 0 对 某 个 n|Zo = ei}. 


用 用 表示 向量 (rt Tt2) ,AP)), 用 1 表示 癌 量 (1,1,:.….,1). 
特征 值 . 者 p <1, 则 m7=1 者 p>1, 则 0<m 之 1 且 7 满足 方程 


Tt 一 f V(r), 1 一 2. 


8.7 ”连续 时 间 分 支 过 程 


8.1~8.6 节 中 所 研究 的 分 支 过 程 限于 发 生 的 时 间 是 固定 的 情况 . 虽然 某 些 现象 
特别 是 实验 室 试验 , 是 符合 这 种 情况 的 , 但 大 多 数 自然 界 的 繁殖 过 程 关 于 时 间 都 是 


§ 
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连续 发 生 的 . 因此 我 们 有 必要 研究 连续 时 间 的 分 支 过 程 . 

本 市 将 考虑 时 间 齐 次 马尔 可 夫 分 支 过 程 的 构造 . 在 8.11 节 中 马尔 可 夫 的 限制 
将 被 去 掉 . 我 们 用 指定 过 程 的 无 限 小 概率 的 办 法 来 确定 状态 变量 为 X(t) ={ 在 时 刻 
t 粒子 的 数目 , 已 知 (0) = 甘 的 连续 时 间 马 尔 可 夫 分 支 过 程 . 令 


61k + okh + ol(h), k=0,1,2,..., (7.1) 


( 见 4.4 节 和 第 2 卷 第 14 章 ) 表示 在 很 小 时 间 区 间 (上 十 四 内 , 单个 粒子 分 裂 产 生 
k 个 粒子 (或 研究 对 象 ) 的 概率 . 在 式 (7.1) 中 , 61k 照例 为 克 罗 内 克 6 符号 , 并 且 假 
设 他] < U, QK 之 0， k = 0,2,3,.…., 及 


>》 ap 一 0 (7.2) 
天 一 


我 们 进一步 假定 每 个 粒子 彼此 相互 独立 地 服从 由 式 (7.1) 给 出 的 无 限 小 概率 分 布 . 
注意 , ak 不 依赖 于 分 裂 或 转换 的 时 间 , 因此 实际 上 我 们 可 假定 转移 概率 关于 时 间 是 
齐 次 的 . 

表示 无 限 小 转移 的 男 一 途径 是 区 分 分 裂 发 生 的 时 间 和 分 裂 的 情况 . 这 样 , 每 个 
对 象 的 生活 时 间 是 随机 变量 , 它 服从 以 均值 为 和 = ao +az 十 as 十 … 的 指数 分 布 ， 
当 其 生命 结束 时 , 它 产 生 数 目 为 D 的 同类 对 象 的 后 代 , 其 中 D 为 随机 变量 , 其 分 布 
概率 为 


Qk 
a0 十 ao 十 a3 十 …… 


各 个 个 体 的 寿命 和 后 代 分 布 均 是 独立 同 分 布 的 . 考虑 到 独立 性 假设 , 特别 是 各 个 个 
体 行为 的 独立 性 , 我 们 可 以 把 式 (7.1) 等 价 地 用 无 限 小 转移 概率 矩阵 表示 为 


Pr{X(t+h)=n+k—1X(t) =n} = nach+ olh) (7.3) 


Pr{D = 对 = k = 0,2,3,.... 


并 且 
Pr{X(t+h)=n|X(t) =n} = 1+nanb + olh), (7.4) 


其 中 , o(h)/h 当 hh 一 0+ 时 趋向 于 0. 

我 们 早已 在 生 灭 过 程 那里 遇见 连续 时 间 分 支 过 程 的 例子 . 事实 上 , 知 置 az = 
A,a0 = pa = 一 (和 十 Jj) 和 ax = 0(k = 3,4,…), 则 (AX 二 pj) 可 以 解释 为 一 个 生 
或 灭 事件 的 概率 ; 和 /( 和 十 1)(4/( 入 十)) 是 在 一 个 生 或 灭 的 事件 已 发 生 条 件 下 生 ( 灭 ) 
的 概率 . 这 样 得 到 的 随机 过 程 , 其 状态 变量 是 群体 含量 , 现 可 看 为 是 线性 增长 的 生 灭 
过 程 ( 见 4.6 市). 

在 第 14 章 我 们 将 解释 , 车 构造 一 个 马尔 可 夫 过 程 , 使 其 对 应 于 一 事先 指定 的 无 
限 小 概率 矩阵, 将 是 件 困 难事 情 . 而 要 保证 所 构造 过 程 服从 分 支 过 程 规 则 , 即 各 个 粒 
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子 产生 独立 的 家 族 , 并 且 其 后 代 也 是 相互 独立 地 繁殖 , 等 等 , 是 件 更 加 困难 的 事情 . 
我 们 将 不 进行 这 方面 的 分 析 , 因为 这 已 超出 本 书 的 范围 . 读者 若 要 了 解 这 一 点 , 可 参 
阅 Harris 的 书 ( 见 本 章 末 参考 书目 ). 此 外 , 我 们 提醒 读者 注意 第 2 卷 第 14 章 中 有 
关 蕊 尔 可 夫 过 程 和 无 限 小 概率 矩阵 之 间 关 系 的 讨论 . 

设 pijy(t), 以 后 也 将 如 此 表示 , 表示 在 时 刻 o 群体 有 i 个 个 体 , 而 在 时 刻 上 群体 
有 了 个 个 体 的 概率 , 用 符号 表示 为 pij(t) = Pr{X(Li+s) = j|X(s) = 让. 如 记号 所 示 ， 
这 个 概率 仪 依赖 于 间隔 时 间 , 即 过 程 具有 平稳 转移 概率 . 我 们 引进 母 函 数 


一 》 PP (t)s7. (7.5) 
j=0 
由 于 个 体 的 行 是 相互 独立 的 , 我 们 有 基本 关系 式 
DP t)s’ = [9(t; s)]’. (7.6) 


公式 (7.6) 刻 划 了 分 支 过 程 并 使 其 与 别 的 连续 时 间 马 尔 可 夫 过 程 区 别 开 来 . 它 表示 
不 同 个 体 (或 粒子 ) 各 自 引 起 独立 的 过 程 实现 的 性 质 , 不 受 其 他 个 体 繁殖 的 后 代 影 
啊 , 换言之 , i 个 初始 个 体 经 过 t 时 间 , 繁殖 成 拥有 含量 为 X(t;i) 的 群体 依 概率 意义 
与 个 由 单个 个 体 经 上 时 间 的 繁殖 而 成 的 群体 的 总 和 相同 . 

由 于 对 时 间 的 齐 次 性 , 切 普 最 - 科 尔 莫 姜 罗 夫 方程 取 如 下 形式 ; 


t+7) = > ,pik(t) Pes(7) (7.7) 
k=0 
由 (7.5), (7.6) 和 (7.7) 得 


[b(t + 7; s)] -> (t+7)s’ = SS Pa (t)Px; (7 


7 二 0 k=0 


- -DP DP (7)s’ = D Pal (WIo(r; s)] 


k=0 
= [¢(t; $(7; 中 
特别 有 
9 十 Ti3) = p(t; Ol7; s)). (7.8) 


连续 时 间 情 形 下 的 关系 式 (7.8) 类 似 于 离散 时 间 分 支 过 程 情形 下 的 迭代 公式 
( 见 8.2 市 ) 下 面 我 们 介绍 由 (7.1) 定义 的 无 限 小 概率 的 母 函 数 . 令 


OO 
一 》 aksk. 


k=0 
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考虑 


ph; s) = 3 Pi;(h)s’ = 330 + ajh + o(h))s’ 
了 一 必 


7 一 0 


一 5 十 六 3 ajs7 + o(h) = s+ hu(s) + o(h). 


j=0 


Plt + h;s) = lt; Ph; s)) = Plt;s + huls) + olh)), 


依 泰勒 定理 , 将 上 式 右边 关于 第 二 个 变量 展开 得 
0 3) 


plt+h;s) = 9(t;s) + Oo——— hu(s) + o(h). 
"| t+h: 上 O09(t; h 
Get) = 065) B65) (6) + oN) 


令 h 递减 趋 于 0, 导出 
O09(t;s) _ 99(t; 5) 


Ot Os (s). 
这 是 一 个 关于 二 变量 隆 数 9(t; s) 的 偏 微 分 方程 , 其 初始 条 件 为 


0; s) 三 ~ Pp (0)s’ 三 8 
j=0 
当 u(s) 已 知 时 , 由 (7.10), (7.11) 可 解 得 9(t; s). 


(7.9) 


(7.10) 


(7.11) 


偏 微分 方程 (7.10) 只 不 过 是 科 尔 莫 戈 罗 夫 疝 前 微分 方程 的 另 一 种 形式 , 它 为 转 


移 概率 函数 的 母 函 数 所 满足 ， 


我 们 还 可 导出 相应 于 科 尔 莫 龙 罗 夫 向 后 微分 方程 且 而 被 $ 所 满足 的 第 二 个 微 


分 方程 . 为 此 , 在 (7.8) 中 代入 t=, 得 
Ph + 7T;s) = Ph; (7; s)), 
然后 利用 前 面 (7.9) 的 泰勒 展开 式 , 这 就 推 得 
ph+7;s) = p(T; 8) + hu(b(T; s)) + oR). 


改写 上 式 为 
ST + Hr) g(r;s)) + 


| 


(7.12) 
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令 h 一 0+, 并 用 上 代替 7, 我 们 得 到 
GS) g(t; s)). (7.13) 


这 是 一 个 常 徽 分 方程 , 其 初始 条 件 仍 为 (7.11). 稍 后 , 我 们 将 说 明 如 何 正确 解 (7.13). 


8.8 ”连续 时 间 分 支 过 程 的 消失 概率 
我 们 先 来 计算 X(t) 的 均值 . 为 此 , 关于 s 并 改变 左边 微分 的 顺序 , 推 得 


0 09(t; s) -二 5) PU) 3) 
BI Bs Ds ul(s ) 十 一 一 一 一 u (8s). (8.1) 
置 s =1, 由 于 w(1) = 0[ 即 条 件 (7.2)], 我 们 有 
tt) = (1)m(t), (8.2) 
其 中 Str 
m(t) = EX(t) = 人 i 
(8.2) 的 解 是 
ml(t) = explw (1)t, \8.3) 


这 是 因为 , 我 们 者 假设 X(0) = 1, 其 初始 条 件 便 为 m(0) = 1. 
其 次 , 我 们 来 处 理 消 失 概 率 问题 . 在 此 假定 ao > 0, 否则 不 可 能 消失 . 我 们 只 需 
考虑 初始 时 刻 只 有 一 个 个 体 的 情况 . 事实 上 , 由 (7.6) 我 们 有 


SP, (t)s’ 一 bp PP; oo| 
7 一 0 


j=0 
因此 ， 
Pio(t) = [Po 人 ti 
但 Pio(t) 是 含量 为 i 个 个 体 的 群体 经 过 时 间 上 之 后 消失 的 概率 , 直观 上 易 知 Pio(t) 
关于 t 是 不 减 的 . 下 面 我 们 将 利用 (7.8) 严格 证 明 这 一 事实 . 实际 上 ， 
Pio(t +7) = [6(t+7;0)] = [Gt; $7, 0))] 
> [9(t, O)} = Pio(t), 


其 中 我 们 使 用 了 p(t, s) 关于 s 具有 非 负 系数 的 只 级 数 的 事实 , 因此 它 关 于 s 是 增 函 
数 . 
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消失 概率 可 定义 为 源 于 单个 个 体 的 “家 族 ” 最终 绝 灭 的 概率 , 即 
q = lim Polt). 


利用 离散 时 间 分 支 过 程 的 理论 ( 见 8.3 市 ), 我 们 易于 确定 连续 时 间 情 况 下 的 消 
失 概 率 , 设 to 是 任意 固定 的 正 数 并 考虑 离散 时 间 过 程 


天 (0)， X(to), X (2to), to) 


其 中 X(t) 是 原来 的 连续 分 支 过 程 在 时 刻 t 时 群体 含量 , 该 群体 在 时 刻 t= 0 只 有 一 
个 个 体 . 由 于 X( 是 一 马尔 可 夫 过 程 , 因此 离散 时 间 过 程 Y, = X(nto) 显然 是 一 马 
尔 可 夫 链 , 并 且 它 还 是 一 离散 时 间 分 支 过 程 . 事实 上 , 由 X(t) 的 概率 函数 的 齐 次 性 
的 假设 及 式 (7.6), 我 们 有 


S Pr{Yari = klYs = i}s* = ElsY*t1|Y,, = 
二 0 


= Els* (+o X (nto) =d] = Els* "|X(0) = 
= [p(to; s)] = {Els* “OX(0) = 1 
= {Els':|Yo = 1]}:. 
这 就 证 明了 Y 构成 一 个 分 支 过 程 . 对 于 这 个 过 程 , 单独 一 个 个 体 后 代数 目的 母 函 数 
是 p(to; s). 因此 , 如 8.3 节 中 所 证 , 过 程 7 的 消失 概率 是 下 面 方程 的 最 小 非 负 根 : 
ftois) = 3， (8.4) 
但 
Pr{Yn = 0 对 于 某 个 n} = lim Pr{Yn = 0} 
= lim Pr{X(nto) =0} 
= lim Pr{X(t) =0} =¢. 


因此 , 连续 时 间 分 支 过 程 X(t) 的 消失 概率 g 是 方程 (8.4) 的 最 小 非 负 根 , 其 中 to 是 
任意 正 数 . 

由 于 g 是 方程 (8.4) 对 于 任意 如 的 根 , 我 们 希望 也 能 从 一 个 不 依赖 于 时 间 + 的 
方程 中 来 计算 gq. 这 确实 可 以 做 到 , 我 们 有 下 面 定理 : 

定理 8.1 消失 概率 gq 是 方程 
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u(s)=0 (8.5) 


的 最 小 非 负 根 . 因此 , g = 1 当 且 仅 当 w(1) < 0. ( 记 注 , u(s = Yaps = Q18 十 [lao 十 
k=0 
a25" 十 .…] = 015 十 9(s).) 


证 明 由 于 g 对 于 任意 to 满足 (8.4), 根据 方程 (7.12), 对 任意 h > 0, 我 们 有 


= wu(g) 十 一 一 0 


令 h 一 0+, 我 们 得 到 wu(q) = 
因为 w'(s) = So (k 一 Le -2 > 0, 所 以 u(s) 在 区 间 [0, 1] 是 西 的 . 由 于 


k=2 
u(1) 二 0 和 wu(0) = ao > 0, ul(s) 在 (0, 1) 至 多 有 一 个 零点 . 根据 是 否 成 并 w(1) < 0 
或 w(1) > 0, 我 们 分 别 有 如 图 8-3 或 图 8-4 所 示 的 情况 . 注意 , E(X(t0)) = E(Y) >1 
当 且 仅 当 w(1) > 0. 这 意味 着 对 于 离散 时 间 分 文 过 程 X(nto),n =0,1,2,… (to >0 
固定 ), 消失 概率 小 于 1, 因此 对 于 过 程 X(t) 也 有 相同 结论 . 在 这 种 情况 下 , 消失 概 
率 一 定 是 ul(s) 在 [0,1 上 最 小 零点 . 类 似 可 推 郑 , 大 w(1) < 0, 9 必定 等 于 1. 无 论 
哪 一 种 情况 , 9 均 是 (8.5) 最 小 非 负 根 . 


ut{s) 
uw'(1) 夺 0 


图 8-3 


u'(1}>0 
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8.9 连续 时 间 分 支 过 程 的 极限 定理 


现在 我 们 来 解 常 微分 方程 (7.13) 并 分 析 当 上 一 oo 时 其 增长 情况 . 鉴于 exp[w(1 
是 时 刻 t 粒子 数 的 期 望 值 , 因此 可 推测 知 : 相应 于 w(1) 是 负 的 , 零 或 正 的 , X(t 具 
有 不 同 的 性 态 . 我 们 仅 讨 论 w(1) < 0 的 情况 并 附加 假设 uw (1) < co. 首先 我 们 证 明 
函数 


] 1 
Bls) = a) ~ wj-D 


有 界 , 因此 在 0 < s <1 可 积 . 事实 上 , 在 s = 1 的 邻 域 展开 wu(s), 得 
u(s) = wu(1)+u(l)(s—1)+ R(s)(s—1), sgl], 


其 中 , 
lim R(s) = 二 < oo. (9.1) 

注意 到 wu(g) = wu(1) = 0, 我 们 有 

1 1 1 1 

u(s) u'(1)(s— 1)+ R(s)(s — 1) 加 u'(1)(s—1) i1+[R(s)(s — 1)/u'(i) 

i A 
w{(1)(s—1) 1+[R(s)(s—1)/w (I) 
I R(s)/lw (1)) 
3 [Fn 
B(s) = -THR — Dw 

由 (9.1) 直接 可 推 得 B(s) 是 在 s = 1- 的 邻 域内 有 界 . 当然 , 由 B(s) 的 定义 知 B(s) 
在 0 sg1-56 有 界 , 这 是 因为 u(s) 在 所 考虑 情况 [uw'(1) < 0 下 仅 当 s= 1 时 才 
为 0. 于 是 , 在 条 件 ww (1) < oo 和 Yu) <0 之 下 , B(s) 在 0<s<1 是 有 界 的 . 现在 
我 们 对 于 0 < s < 1 可 定义 


(9.2) 


K(s) = / Eee _ GCT dz + i (9.3) 
此 处 积分 存在 且 有 限 . 
此 外 , 由 假设 w (1) < 0 可 得 
K'(s) = >0 0O<s<l1. 
这 表明 K(s) 是 严格 递增 的 和 连续 的 ; 因此 , 映射 
w = K(s) (9.4) 
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具有 连续 的 、 严 格 增加 的 反 晴 数 
s=K (w=L(w), L(K(s))=s, (9.5) 


且 当 = 跑 思 [0,1) 时 , w 跑 遍 [k(0), oo), 并 有 k(0) < 0. 现在 我 们 已 具备 条 件 求 初始 
条 件 (7.11) 之 下 (7.13) 的 解 . 对 (7.13) 分 离 变 量 并 积分 , 可 导出 关于 9(t, s) 的 隐 式 


公式 
p(t;s) dr 
利用 &(:) 定义 , 我 们 得 到 


plt;s) jz ptis) fT 1 1 1 [ts) 
/而 -人 


/ITF1 1 In(1 — $(t; s)) 
-| be ZE D+ w (1) 


fl 1 | nl-s 
上 be u'(1)(z 一 | ° u'(1) 
= K(9(t;s)) — K(s) 
即 
K(g(t;s)) = t+ K(s). 
由 于 Kt{.) 存在 反 函 数 , 因此 对 于 0 乏 s<1 和 +t>0 有 
p(t;s) = 下 一作 十 下 (5))， (9.6) 

在 假设 w(1) < 0,w”(1) < % 之 下 , 我 们 还 可 以 导出 消失 概率 关于 时 间 t 的 某 
些 渐 近 结果 . 因为 B(s) 在 0<s<1 是 有 界 的 , 并 且 ,lim B(s) 存在 , 在 s = 1 的 邻 
域内 我 们 有 [ 见 (9.3)] 


jn(1 一 3) 


“= wt 


~—C.:(1—~s)+o(l— s). (9.7) 

此 处 C 是 负 常 数 ;事实 上 ，lim [1/w(z) 一 (1/(z-1w(1)) = C= (-w (2/2v(1)]). 

o(1 一 s) 按 通 常 意义 理解 , 即 [o(1 一 8)/(1 一 s) 一 0( 当 s 一 1 一 时 ). 改写 (9.7) 为 
lIn(1 — s) = wu (1)K(s) — Cu’(1)(1 ~ s) + o(1 ~ s) 

取 指 数 得 


1 — s= explu (1)K(s)] exp[—Cw’(1)(1 — s)] expl{o(1 — s)]. 
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但 
explo(l — s)| = 1+o(1— s) 

及 

exp[~Cu (1)(1 ~ s)| = 1 ~ Cu(1)(1 — s) +o(l — s), 
由 此 推 得 

1 —s= exp[lv (1)k(s)][l ~ Cw (1)(1 — s) + o(l ~ s)). (9.8) 
因此 

] 一 3 


CODRGJT 


背 助 于 此 极限 , 可 把 (9.8) 写 为 
1 ~ s = {explw(D)K(s]]j{fl- Cu’(1) explw (1)K(s)] + o(exp[u (1)K (3)])}. 
用 K-1(w) 代替 s, 我 们 得 到 [ 见 (9.5)] 
1 — K-!(w) = explu'(1)w]ll ~ Cu’(1)explu (1)w] + o(explw (1)w])], (9.9) 


此 处 s 一 1- 等 价 于 w 一 00. 依 (9.6) 和 (9.9), 我 们 能 够 计算 在 时 间 上 内 不 消失 的 
慨 率 . 即 是 


1— Pio(t)=1— 9(t:0)=1- K-11(t + K(0)) 
= [exp{wu (1)(t + K(0))} 
x {1— Cu (1)(exple (1)(t + EK(0))}) + o(explv (1)(t + K(0))])} 
= exp{w (1)K(0)} exp{w (1)t} + o(exp{2u’ (1)t}) + o(explw (1)t]), 
或 等 价 地 ， 
1 — Plo(t) = explu 人 (t 玫 (0Jm 人 (办 十 olexpfw (TH (9.10) 
当 t 一 oo 时 另 一 渐 近 结果 可 用 如 下 办 法 得 到 . 已 知 针 (t) 寺 0, 半 (t) 的 条 件 概率 母 
函数 定义 为 


gst) = PrfX(=AXG 的 关 0jzk 0<z<1 
k=0 


pr{ X(t) = hIX() £0} = HY) 


Pr{X(t) 0} 
| 0 若 k=0， 
= Pr{X(t) = k} 
1 PXG) =0 PT *A0 


据 此 


8.9 连续 时 间 分 支 过 程 鸭 极限 定理 


— Pr{X(t)=k} Dk p(t; z) — P(t;0) 
人 7 工 一 Pr{X(t) = 0} 1 — g(t;0) 
K-TIt+K(2)) ~ Kt + K(O)) 
1—K-i(t+ KO | 
_ -EK (t+EK(O)-[1-K (t+K(z)) 
1 — Ki(t + K(O0)) 


g(z;t) = 


其 中 对 p(t; s) 我 们 利用 了 式 (9.6). 
由 (9.9) 得 到 天 一 (w) 的 表达 式 代 入 上 式 , 我 们 有 


g(z;t) = 


et (Dt+K(O) {LT + o(ew (D+K(ON) 


1 eu (DK)-KON 1+ ole* WE+NE))) 
1 + o(ev (W(tt+E(ON)) 


令 t 一 oo 由 于 w(1) < 0, 上 式 右边 的 分 式 趋 于 1, 因此 


Jim, 9(2;t) = 9(2) = 1 — exp{u (DIK(z) ~ K(O)). 


然而 , 由 (9.3) 
/1!1 1 In(1 — z) 
Ko-KO= 人 击 -ZED Tt 
-| -| = 
ou wa) lot wa hh a 


因此 , 当 t 一 oo 时 , 得 到 极限 概率 母 消 数 


wiv f{ d ~ 
g(z) = 1 ~ exp [ 1/ 司 | 一 2 Pr{X(t) = kIX(t) #0}2r. 


综 上 所 述 , 有 
定理 9.1 设 XO 是 连续 时 间 分 支 过 程 , 其 无 限 小 概率 母 函 数 为 


OO 
u(s) = 》 Qkps", 
k=0 
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ev (D+K(O) [1 十 olew DEFKONY] ~ er DrK2) | 二 olew DEK ) 


(9.11) 


其 中 {ag} 具有 (7.1) 所 述 意义 并 满足 条 件 (7.2). 若 w'(1) < oo, 并 假设 ul1l) < 0 使 
得 其 消失 概率 4 = 1( 见 定理 8.1). 则 


g(t,s) = 5 Pr{X() = KIX(0) = 1}st 
k= 二 0 
= Kt+K(s)), 二 > 0,|s| < 1 


(9.12) 
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其 中 K(s) 由 (9.3) 确定 , 至 时 刻 t 的 不 消失 概率 依 如 下 指数 速度 趋 于 0 
nm ] 一 Polt) 
423 t=00 explu’ (1)K(0)] explu’ (Li 
此 外 , 随机 变量 X(t) 在 条 件 X(t) > 1 下 有 极限 分 布 , 其 概率 母 函数 为 


Spr{X() = kX(0) = 1}2* 


9(% t= Pr{X(t) = 0} 


一 1 一 exp wt) [ 全 ， ( 当 t 一 00 时 ). (9.13) 
我 们 将 不 加 证 明 地 氢 述 对 应 于 情况 w(1) = 0 和 w(1) > 0 的 极限 定理 . 它们 的 


证 明 比 较 复 杂 , 虽然 本 质 上 是 类 似 的 . 
定理 9.2 (i) 关 w(1) = 0,w (1) < oo, 则 


Pr{X(t) > O01X(0)=1} ~ 


可 Pr > AX( )>0) = -^， 入 >0. 
(让 大 wl)>0 和 ww (1) < o, 则 


X(t) 


“= explu’ (1)t] 


当 上 上 一 oo 时 , 具有 极限 分 布 . 


8.10 ”二 维 连续 时 间 分 支 过 程 


考虑 两 种 不 同类 型 的 粒子 , 我 们 分 别称 其 为 1 型 和 2 型 粒子 . 关于 两 种 类 型 粒 
子 的 连续 时 间 分 支 马尔 可 夫 过 程 将 由 适当 指定 的 无 限 小 概率 [(7.3) 和 (7.4)] 所 确 
定 . 详细 地 说 , 我 们 假定 每 个 i(i = 1,2) 型 的 粒子 在 任 一 小 区 间 (t,t 十 h) 转换 为 各 
个 1 型 的 粒子 和 ko 个 2 型 的 粒子 (hi, kz, = 0,1,2,…) 的 概率 分 别 是 


61k60kz + ab 入 二 oh) (对 于 1 型 ) 


424 60k61kz 十 Ql ph 十 oh) (对 于 2 型 ) 
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其 中 6;; 是 熟知 的 克 罗 内 克 6 符号 . 我 们 假设 粒子 在 任何 时 刻 的 转换 都 与 它 的 过 去 
独立 , 也 独立 于 其 他 粒子 (不 管 是 哪 一 型 ) 的 过 去 和 现在 . 注意 , 这 里 我 们 再 次 假定 
了 转移 概率 关于 时 间 是 齐 次 的 , 因此 参数 of 与 时 间 无 关 . 这 些 参数 必须 满足 条 
件 : 

ai < 0, a < 0, 

a >0 对 所 有 ,kz = 0,1,2,…, 但 所 =1,k2 = 二 0 除外 . 

Qi 之 0 对 所 有 ki, ko = 0,1,2,…. 但 后 =0,kz = 1 除外 . 


和 Oo 
Sab) =0,i=1,2. 
Kl ,k2=0 
我 们 引入 两 个 无 限 小 母 函 数 
OO 
ud(s1,82) = > a sist, i=1,2,(lsl <1,|s2| < 1). 
ki,k2=0 


设 Pe,kzij1,jo(t) 表示 在 时 刻 0 有 局 个 1 型 和 ko 个 2 型 的 粒子 的 群体 经 过 时 间 1 
后 转换 为 5 个 1 型 和 js 个 2 型 的 粒子 的 概率 . 由 于 无 限 小 概率 of) ， 是 与 时 间 无 
关 的 , 故 转移 概率 必 关于 时 间 是 齐 次 的 . 我 们 定义 概率 母 函数 


OO 


$V tis,s2) = >, Pionilt)st sF, 


7J1472 一 0 


p(t; 81, 82) - 人 Po ,ja (t)s1 


J1;j2=0 


与 一 维 分 支 过 程 类 似 , 可 推 得 


> 人 Ra (t)sT 5 一 [人 51， s2)]]”: ta (t; s1, 52)]] ”2， (k1, k2, = 0, 1, 2 小 
0 
(10.1) 
事实 上 , 关系 式 (10.1) 可 以 作为 二 维 连 续 时 间 分 支 过 程 的 定义 . 换言之 , 任何 转移 
概率 矩阵 若 满 足 (10.1) 就 说 它 产生 一 个 二 维 连 续 时 间 马 尔 可 夫 分 支 过程 . 过 程 的 马 
尔 可 夫 特 征 体现 于 切 普 曼 - 科 尔 莫 戌 罗 夫 方程 式 


co 
了 ai (t 十 7) = > Fi ,ka;l1,12 (t) P12;71 ,72 (7). (10.2) 
,2=0 


由 (10.1) 和 (10.2) 我 们 有 


pVNE+T: 381, 82) -Vv Po0;71,j2(t + T)51 5 


Jj1,72=0 
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OO 


OO 
一 》 >》, Po ,Ll2 (t) Pa; ) 72 (7)5 sy 
11,72=0 ,lz=0 
OO 


cc 
2 Pon ald) >》 P12;j1,j2(7T)S1 82 


l,l2=0 71 ,72 一 0 


= 》 PondOD (rs so) (G(r;s1, s2)]" 


l,l2=0 
= $Y) (t; pW (7; 81, 82), $3) (7; 81, 52)). 


对 于 母 函 数 $2(t; s1, s2) 同 理 可 得 


0 人 十 Ti;s1),82) = $V t; ON (Tr; 81, s2), $2 (7; 81, 52)), (i = 1,2). 


此 外 
Gh;si,s2) = > P02(h)sT ss 
j1,j2=0 
Oo 站 , 
一 >», 6171 60,7 十 or 大 十 of 有 ss 
71, 2 一 0 


一 3S1 十 ju 人) (81, 32) 十 o(h), 
对 8 (hi; s1,s2) 也 有 类 似 式 子 , 因此 


pV (有 51, 82) 二 81 十 hu (s1, 32) 十 o(h)， 2 二 1,2. 


(10.3) 


(10.4) 


现在 我 们 来 推导 $9(t; s1, s2) 所 满足 的 类 似 于 (7.10) 和 (7.13) 的 偏 微分 方程 . 


为 此 , 置 7+ = ,并 把 (10.4) 代入 (10.3). 应 用 泰勒 展开 得 


0 (t 十 h; $1); 82) 一 bY (t; 31 十 hu)(si， 82) 十 o(h), 3S2 十 ht?) (81, 52) 十 ol(h)) 


一 $Y (t; 81,， 82) 十 Sn Sa) jul) (81, 82) 
1 


DUO t: ， 
十 从 (有 有 31),82j 


Bs hu (s1, 32 ) 十 o(h). 


两 边 除 以 h, 并 令 h 一 0, 我 们 形式 上 得 到 微分 方程 
Ob (t; s1, 82) _ Ot; 81, s2) 
Ot Os1 


十 9 (6; s1, 82) (2)| 
Oss 


wll (81, s2) 


S31， 82),1 一 1,2. 


(10.5) 
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我 们 再 次 从 (10.3) 开始 , 此 时 令 t=h 并 利用 (10.4), 推 得 
PO (ht+ rT;s1, 52) = 内 (h; G(T; s1, s2), P%) (T; 81, s2)) 
= G(T; 81, 82) + put (G(T; 81, 52), 2 (7; 81, s2)) + o(h). 
两 边 除 以 h, 令 h 一 o, 并 用 tt 代替 7, 我 们 得 到 第 二 个 微分 方程 组 
Bd (e102) = ud) (GD (E; 81, s2), p(t; s1, 32)), i = 1,2. (10.6) 
对 于 (10.5) 和 (10.6) 的 初始 条 件 都 是 
$b (0; s1,s2) = si，1=12. 


利用 (10.5) 和 (10.6) 可 推导 出 该 过 程 随机 变量 的 矩 所 满足 的 常 微分 方程 组 , 对 此 我 
们 不 加 详 述 . 

下 面 我 们 介绍 一 些 二 维 连 续 时 间 分 支 过 程 的 例子 和 应 用 . 

例 1 第 一 个 例子 涉及 有 迁 入 的 分 支 过 程 . 考虑 一 维 连续 时 间 分 支 过 程 , 除 分 
支 外 同时 允许 某 些 粒子 迁 入 该 系统 . 回忆 前 面 的 记号 


61k 二 Qkph+o(h), k=0,1,2,..., 


表示 一 个 粒子 在 较 小 时 间 区 间 (t,t+h) 内 转换 为 个 粒子 的 概率 , 此 事件 与 该 粒子 
的 过 去 以 及 其 他 粒子 都 是 独立 的 . 现在 我 们 把 迁 入 因素 添加 进去 , 设 


0ok 十 站 六 十 o(h), k=0,1,2,..., 


表示 在 时 间 区 间 (t,t+h) 内 , 独立 于 群体 的 现在 与 过 去 的 上 个 同类 型 粒子 迁 入 有 目 与 
该 群体 合并 在 一 起 的 概率 , 注意 , 参数 ok 和 bx 均 假 定 独立 于 转换 及 迁 入 发 生 的 时 
间 , 即 联 系 每 个 个 体 的 无 限 小 转移 概率 是 时 间 齐 次 的 . ak 和 bk 必须 满足 条 件 : 


Q1 0, bo < 0， 
Qax 之 0, k = 0, 2,3,.…, 
凡 志 0 k= 1,2,3,..., 


co oo 
>》 ok = 一》 bk=0. 
k=0 


大 = 


心 


P(t) = Pr{ 群 体 在 时 刻 t= 0 无 粒子 存在 , 而 在 时 刻 t 包含 个 粒子 } 
= Pr{X(t) = kX(0) =0}, k=0,1,2,..., (10.7) 
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其 母 明 数 为 
b(t;s) = 》 P(t)s*. (10.8) 
大 一 0 
我 们 目标 是 求 P(t) 的 值 , 独行 不 通 , 就 确定 它 的 菜 些 性 质 . 
引进 两 个 无 限 小 母 函 数 


u(s) = aps 和 wv{s) = Sb 
k=0 k=0 


我 们 可 把 带 有 迁 入 的 一 维 连 续 时 间 分 支 过 程 视 为 二 维 连 续 时 间 分 支 过 程 作法 如 下 : 
假定 我 们 有 两 类 质子 : 1 型 和 2 型 , 它们 具有 特定 的 无 限 小 转换 概率 , 正如 本 章 开 始 
所 述 恒等式 成 立 的 理由 如 下 : 考虑 两 种 类 型 的 粒子 : 一 种 是 实 的 , 另 一 种 是 虚构 的 . 
一 个 实 的 粒子 至 它 的 生命 ( 它 的 长 短 服从 参数 为 人- = ao 十 az 十 a3 十 … 的 指数 分 
布 ) 结束 时 , 以 概率 Xak(k = 0,2,3,…) 产生 大 个 新 的 实 粒子 . 一 个 虚 的 粒子 也 有 一 
个 随机 存活 时 间 长 度 ( 依 参数 为 和 = bi + bz 十 … 的 指数 分 布 )， 生命 结束 时 以 概 


率 入. br(l = 1,2,3,…) 产生 /个 实 的 粒子 和 一 个 虚 的 粒子 . 注意 ，》 3b; = 1. 虚构 
i=1 
粒子 的 后 代 迁 入 因素 . 置 


(1) -| ak 和 者 ko2=0，, 


hi | 0 夺 k2 关 0， 
(2) J br 者 k2 二 1 

Qk ,ja 一 
0 车 及 六 1 


依 本 节 开 始 时 记号 , 我 们 有 


OO Qo 
1 (1) Ki k 
人 ) (81, s2) 一 2, Qk ,ka 31 52 = >》 QkiS1 ， 


大 1 ,天 2 一 0 k1 =0 
OD OD 
2 > (2) ki ka _ 3 k 
ut ) (sg1, s2) 一 Qk ko S1 3S2 一 89 bk 31 1 
不 1 ,天 2 二 日 kl 一 0 


这 样 ， 


ul) (81, 82) = ul(81), wl2) (81, 82) = 82v(81). 
在 此 特别 情况 下 , 微分 方程 (10.5) 变 为 


(2) (t: 81, PA, t; 51 ， O09) t; 3S1， . 
S159) 一 一 291) 十 soo(sl) 2 一 1, 2, (10.9) 
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微分 方程 (10.6) 变 为 
OS (fen 22) = u(b( W(t; s1, 32)) (10.10) 
和 (2) 
= [0 (t; s1, s2)]v (0 (t; s1, 82)). (10.11) 


现在 我 们 来 说 明 二 维 分 支 过 程 的 概率 Po,i;j,,;,(t) 与 (10.7) 所 定义 的 概率 之 间 的 关 
系 . 依照 两 种 类 型 粒子 的 意义 , 初始 状态 (0, 1) 表示 我 们 在 时 刻 0 没有 实 的 粒子 而 
存在 由 一 个 虚构 粒子 表示 的 潜在 迁 入 因素 . 由 符号 本 身 意义 , 显然 有 


用力 (#) 者 72 -一 1, 
Po 1,71,j2(t) = | 0 若 太 上 1 


因此 ， 
pH (ti s1, 52) = s29(t; 51). (10.12) 


由 (10.9), 用 s 代替 s1, 我 们 得 到 


A = 0) ls) + p(t; s)v(s). (10.13) 


初始 条 件 为 
4g(0; 5) = 1. (10.14) 


在 适当 初始 条 件 下 解 方程 组 (10.10) 和 (10.11) 比 解 这 个 微分 方程 来 得 更 容易 
方程 (10.10) 可 以 按 分 析 (7.13) 的 方法 加 以 处 理 ，(10.10) 的 解 可 表示 为 如 (9.6) 形 
式 , 记 其 为 f(t;s), 此 处 用 s 代替 s1, 其 中 sa 不 出 现 . 由 于 (10.12) 的 缘故 , (10.11) 
变 为 

OE 8; 8)o(f (6; 3) (10.15) 


初始 条 件 为 (10.14). 式 (10.15) 解 为 
p(t; s) = exp / v(f (7:; sjdr| . 


. 例 2 本 市 末 我 们 来 描述 一 个 简单 的 “二 分 裂 ” 非 马尔 可 夫 的 单 型 连续 时 间 
分 文 过 程 , 它 可 归结 为 二 维 连续 时 间 马 尔 可 夫 分 支 过 程 . 假设 一 个 粒子 具有 寿命 分 
布 密度 

入 一 人 ft 
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即 是 阶 数 为 2 的 工分 布 . 当 此 粒子 消失 时 , 它 被 两 个 相同 类 型 粒子 所 代替 , 每 一 个 
省 独立 于 另 一 个 并 与 原来 粒子 相 独 立 , 并 且 每 一 个 都 服从 寿命 分 布 (10.16). 

马尔 可 夫 过 程 一 般 来 说 是 用 如 下 性 质 来 刻 划 : 在 任何 e 知 状态 下 其 等 候 时 间 
服从 指数 分 布 . 在 本 例 中 已 知 状态 的 等 候 时 间 由 粒子 寿命 所 确定 . 如 果 它 是 指数 分 
布 则 这 些 粒 子 的 群体 过 程 构成 一 马尔 可 夫 过 程 . 但 上 述 寿命 分 布 不 是 指数 分 布 , 而 
是 两 个 指数 分 布 的 卷 积 . 

设 X(t) 表示 时 刻 t 的 粒子 数 , 并 假设 X(0) = 1. 由 于 (10.16) 是 两 个 具有 参数 
为 入 的 独立 随机 变量 之 和 的 密度 函数 , 我 们 可 认为 每 个 粒子 的 寿命 经 过 两 个 分 开 的 
阶段 , 在 每 个 阶段 均 服 从 参数 为 和 的 指数 分 布 , 这 样 就 很 容易 把 它 归结 为 二 维 连续 
时 间 马 尔 可 夫 分 支 过 程 . 此 时 我 们 不 说 是 相同 粒子 的 寿命 经 过 两 个 阶段 , 而 说 存在 
两 种 不 同类 型 的 粒子 . 一 个 1 型 粒子 具有 参数 为 的 指数 分 布 寿命 , 然后 转换 为 2 
型 粒子 . 一 个 2 型 粒子 具有 参数 为 和 的 指数 分 布 寿命 , 然后 转换 为 两 个 1 型 的 粒子 ， 
这 样 , 利用 本 世 开 始 时 记号 , 我 们 有 
| -1 车 向 =1 和 如 =0， 


(1) 


CQK Ko -~ 一 十 上 在 | 一 0 和 ko 一 1, 


0 其他， 
| +1 着 后 =2 和 大 =0， 


(2) 


ai 一 -1 大 所 =0 和 ks=1， 


0 “其 他 ， 
此 处 , 为 简单 起 见 , 假定 入 = 1. 那么 


ul)(g1, 32) 一 一 81 十 82 


且 


wu(2) (51 ， 32) 二 51 一 80. 


方程 式 (10.5) 和 (10.6) 变 为 特殊 形式 , 已 知 X(0) = 1 和 区 的 母 函 数 可 由 内 1 (t; s1, s2) 
置 s1 = so = s 得 到 . 
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本 市 所 讨论 的 分 支 过 程 的 每 个 对 象 (或 粒子 、 个 体 ) 的 寿命 是 服从 一 般 分 布 的 ， 
当 其 生命 告终 时 产生 它 的 后 代 .， 这 可 与 前 后 所 介绍 的 寿命 固定 的 或 服从 指数 分 布 
的 分 支 过 程 相 比 较 . 我 们 假定 一 个 个 体 寿命 随机 变量 了 具有 概率 密度 f(t), 即 该 个 
体 在 时 间 区 间 (t,t 十 中) 内 死 志 的 概率 为 (tjdt. 我 们 还 假定 该 个 体 死 亡 时 分 裂 成 
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两 个 , 从 而 产生 了 两 个 新 的 同类 型 个 体 , 它们 的 寿命 分 布 相互 独立 , 而 概率 密度 同样 
为 f(t). 在 它们 生命 结束 时 , 每 一 个 又 分 裂 成 同类 型 的 两 个 新 个 体 , 如 此 连续 以 至 
无 穷 . 设 N(t) 表示 在 时 刻 t 存活 个 体 的 数目 , 其 概率 分 布 记 为 


P(t) = Pr{N(t) =k}, k=0,1,2,.. 


显然 , 对 所 有 tt 之 0 有 Polt) = 0, 因为 群体 在 第 一 次 分 裂 前 恰好 有 一 个 个 体 , 第 一 次 
分 裂 后 至 少 有 两 个 个 体 , 从 而 在 任何 时 刻 至 少 有 一 个 个 体 , 于 是 


D1(t) = Pr{N(t) = 1} = Pr{T >t=1— Ft), 
其 中 | 
F(t)=Pr{T <t}= / f(T)dr 


是 工 的 分 布 函数 . 
一 般 地 , 令 G(s,t) 是 N(t) 的 概率 母 函 数 , 即 


G(s,t) = Dm) 3 k 2 pelt)s 


k=1 
我 们 将 得 到 关于 G(s,t) 的 积分 方程 . 在 时 刻 t 恰 有 上 个 个 体 的 概率 p(t) 可 用 如 下 
方法 求 得 . 第 一 次 分 裂 以 概率 f(7)d7 出 现在 时 间 区 间 (7,7 十 d7)(0 < Tg 内 , 然 
后 两 个 新 的 个 体 分 别 独立 地 经 历 相 同 的 分 支 过 程 , 并 且 在 余下 时 间 t 一 7 内 要 产生 
全 部 上 个 后 代 . 自然 , 第 一 次 分 裂 时 刻 7 可 以 取 区 间 [0,4 内 任何 一 个 值 . 于 是 , 由 
全 概率 公式 得 


pnO= dTf(7) 和 pt- | 上任 一 T)， k=2,3,... 


一 | 


且 
pi1(t) = 1— F(t). 


据 G(s,t) 的 定义 , 我 们 有 
G(s,t)=[1—F Wet De 本 dTf(7 


一 企 一 下 Wet Ds jot 


P(t — 7T)pk—i(t —7) 


站 一 T)DkitE 一 了 ). 


EM I 
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既然 这 里 所 涉及 的 量 是 非 负 的 , 和 号 与 积分 号 可 以 互相 交换 , 从 而 


oo k 


G(s,t) = / drf(7)Y st plt— Tp i(t -7) + [1— FC)]s 
k=0 


{=0 


其 中 和 可 视 为 因子 》、skpktt 一 7) = G(s,t 一 7) 的 卷 积 . 这 样 


k=0 
G(s,t) = / IG(s,t — 7)]2f (7)dr + [1 — F(t)ls. (11.1) 
不 幸 的 是 , 此 积分 方程 一 般 无 法 求解 . 然而 , 当 工具 有 密度 为 
f(t)}= Me *t, t>0, (11.2) 


的 指数 分 布 时 , 我 们 可 以 求 得 其 解 . 相应 于 此 特殊 情况 是 Yule 纯 生 过 程 , 事实 上 , 若 
存在 个 初始 个 体 , 则 至 第 一 次 分 裂 的 时 间 区 间 长 度 是 随机 变量 Z min(X1, X2,…， 
Xn), 其 中 Xi 是 独立 的 且 具 有 分 布 律 (11.2). 2 服从 参数 为 nA 的 指数 分 布 . 所 以 ， 
在 以 后 任 一 h 单位 时 间 分 裂 的 机 会 为 nAh 十 of 站. 当 分 裂 发 生 时 , 群体 所 含 个 体 增 
加 至 mn 十 1, 并 且 再 下 一 次 分 裂 的 时 间 区 间 长 度 是 服从 参数 为 (n 十 1) 和 的 指数 分 布 ， 
如 此 等 等 . 4.1 节 已 经 从 纯 生 过 程 的 观点 研究 过 这 个 例子 . 下 面 我 们 用 另外 的 方法 来 
研究 . 
当 1 一 F(t) = ee- 时 ,方程 (11.1) 变 为 


t 
G(s, t)e’! = 和 | [G(s,t — 7)]?e*(t:- dr++s. 
0 


记 u=tC— 了 得 ft 
G(s,t)e”*! = | [G(s, uj edu++s 
0 
关于 微分, 导出 方程 
etG’(s,t) + Me*‘G(s,t) = AG'(s, ent 
其 中 


G(s,t) = G(s,t). 
消去 因子 eX 之 后 , 上 面 方程 化 为 贝 努 利 型 微分 方程 ， 


G’(s,t) = AG(s, t)}* ~ AG(s, t). (11.3) 


8. 
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为 解 此 微分 方程 , 可 简单 地 分 离 变 量 ， 
dG!(s,t) 


Gl DG 1 
则 其 解 为 coh -1 
St)—1 
G(s,t) C(s)e 
或 简化 为 | 
其 中 , C(s) 关于 t 是 常数 ,但 可 以 是 s 的 函数 . 为 确定 C(s), 在 (11.4) 中 令 = 0, 由 
于 
上 0， 奉 大 关 1， 1 
pxk(0) = | 1， 若 上 二 1 5 三 G(s,0)= TI 二 Cr 
推 得 


C(s) = 2 一 


故 (11.3) 的 解 (也 是 (11.1) 在 指数 分 布 寿命 情况 下 的 解 ) 是 


Se 一 
1 一 (1 一 exXt)s 


为 求 得 pk(t) 显 式 表 达 式 , 将 (11.5) 按 s 的 攻 级 数 展 开 , 即 
G(s， t) e—*t sD MG - e 一 th) 3 


k=0 


G(s,t) = (11.5) 


显而易见 , 我 们 有 
pk 人 二 ee 1 对 于 大 =12 


虽然 在 一 般 情 况 下 无 法 解 积 分 方程 (11.1), 但 我 们 可 由 它 得 到 关于 均值 函数 
m(t) = 五 (NO 的 一 个 等 式 . 注意 


Co t) 一 | -imO=m _ 


对 s 微 分 (11.1) 导致 
tcl ) -ct Gt ai t 


dG(s,t— 7) eo, )dr 十 1 一 所 人 (加 
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两 边 令 s = 1, 由 于 


OO 


G(1,t—7)= pr(t—7)=1. 


k=1 
则 | 
ml(t) = 2 | m(t—7)f(r)dr+1— F(t). 
0 


此 积分 方程 可 作为 更 新 方程 的 一 个 例子 . 它 的 特点 是 未 知 函 数 以 元 积 形式 出 现 于 积 
分 号 内 . 有 许多 经 典 理论 涉及 到 更 新 方程 . 它 描述 了 解 mlt) 的 渐 近 增长 性 质 . 

上 述 模 型 的 一 个 目 然 推广 是 允许 每 个 个 体 在 其 生命 结束 时 恰好 分 裂 成 7 个 新 
的 同类 型 个 体 , 其 中 7 是 比 2 大 的 固定 整数 . 此 时 易 见 , 积分 方程 (11.1) 变 为 


G(s,t) = / G(s,t — DF f(r)dr + [1 — F(t)]s. 


这 个 模型 的 进一步 推广 是 每 个 个 体 在 其 生命 结束 时 分 裂 成 随机 数目 的 同类 型 
新 个 体 . 例如 , 我 们 可 以 假设 每 个 个 体 死亡 时 以 概率 qi(i = 0,1,2,…,) 产生 ! 个 新 
的 同类 型 个 体 . 令 


hl(s) 一 》 qs' 
{=0 


是 相应 的 母 函数 . 我 们 可 用 下 述 方法 导出 积分 方程 . 设 第 一 次 分 裂 出 现在 时 刻 7(0 < 
7 < 缮 且 有 i 个 新 的 个 体 产 生 . 这 个 事件 的 概率 为 f(7)drqi 在 余下 t 一 7 个 单位 时 
间 内 ,! 个 个 体 的 每 一 个 都 能 产生 后 代 使 得 在 时 刻 t 群体 含量 达到 k. 依 全 概率 公 
式 , 我 们 有 


OO 


t 
px(t) = / drf(T)O ga 9 pp(t—7)pks(t—7)..... pk(t—7) 


l=0 kit+k2+…+k1=k 
对 于 k = 2,3,:… 利 p1(t) = 1 了 F(t). 


母 消 数 为 


ce = [FONs+ Ds drt) Ya 2 Dk, (上 一 T) pr (tC—7) 
k=2 “0 


I 二 0 天 1 十 … 十 天 一 天 


-0-Pbls+ 1/ drf(7) 》g@ 》 s* 2》, pk (t — TT) pk,(t — 7). 


I=0 k=l 大 1 十 … 十 下: 一 大 


yp 人 站 pn 人 一 了 ) 


k=0 Ka: 十 … 十 大 一 大 


初等 问题 393 
的 内 和 是 ! 重 卷 积 . (学 生 应 自行 证 明 .) 其 中 每 因子 对 应 下 式 
》 sepk(t 一 T) = G(s,t—T7), 
k=0 
总 和 为 [G(s,t+ 和 7T)] 故 有 


G(s,t) = [1 F(t)ls+ / drf(7) YS glG(s,t 一 ?站 
0 i=0 
等 式 右 痢 积 分 中 的 和 式 给 出 了 在 x = G(s,t 一 7) 处 的 母 函 数 h(s). 在 此 情况 下 , 最 
终 积分 等 式 的 形式 如 下 : 


G(s,t) = / h(G(s,t - T) Fr)dr + [1 — F(t)ls. 


初等 问题 
1. 设 X 是 一 分 支 过 程 且 Xo = 1. 对 任 给 固定 正 整 数 ,定义 序列 


Yr = Xrk,T = 0,1,2,..: 


试 证 {Yr,"7 = 0,1,2,…} 构成 一 分 支 过 程 , 若 p(s) 是 过 程 X 中 单一 个 体 直 接 后 代 随 机 变 
量 的 母 旺 数 , pn(s) 是 其 第 ”次 和 迭代 式 , 则 pk(s) 是 过 程 Y 中 单一 个 体 直 接 后 代 随 机 变量 
的 母 函 数 . 


2. 设 1(s)=1-p(1-s) 其 中 p 和 6 是 常数 是 0<p<1,0<8<1. 试 证 明 f(s) 是 
概率 母 也 数量 它 的 迭代 式 为 


fn(s) 二 1 p18++8™ (] _ s)e ， n= 1,2,.... 
3. 设 f(s) 是 概率 母 函 数 , h(s) 是 满足 
9(s) = h [ff(h(s))] 


的 一 个 概率 母 函数 , 试验 证 
gn(s) 一 h [fn(h(s)) 


是 一 个 概率 母 函数 , 其 中 f 和 g, 分别 表示 函数 f 和 9 的 第 n 次 友 代 函 数 式 . 436 
4. 作为 初等 问题 3 的 一 个 例子 , 取 
f(s) - (m > 1) 


”mm (mm 二 Ts 


h(s)=s" (k 为 正 叉 数 ). 
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试 证 g(s) = hf(h(s)) 是 母 函数 , 且 9 的 第 n 次 迭代 式 为 


0") tr tr er 


5. 证 明 在 分 支 过 程 Xn 中 者 m = E(X1)<1 则 
E (> xc =m/(l— m). 
nn 二 1 


6. 设 从 一 红细胞 开始 进行 血 培 养 , 一 分 钟 之 后 红细胞 死亡 并 按 下 面 所 指定 的 概率 产生 
对 应 的 一 组 细胞 . 


2 红细胞 2， 
1 红细胞 ,1 白细胞 。 了 
2 白细胞 = 


每 个 红细胞 生活 一 分 钟 之 后 又 以 同样 方式 产生 后 代 细 胞 ， 而 每 个 白细胞 生活 一 分 钟 死亡 之 
后 不 产生 后 代 . 假定 各 个 体 细胞 之 间 是 相互 独立 的 . 试 求 

(a) 血 培养 开始 之 后 n+ 3 分 钟 不 出 现 白细胞 的 概率 

(b) 血 培养 过 程 最 终 完 全 死亡 的 概率 


和 条 (3)  ;(b) 3 


7, 设 f(s) = as 十 bs 十 c, 其 中 a,b,c 是 正 的 且 f(1) = 1. 假设 消失 概率 为 4(0 < d < 1). 
试 证 明 。 

8. 设 某 分 支 过 程 一 个 初始 粒子 后 代 个 数 的 分 布 具有 母 溺 数 f(s). 第 一 代 每 个 成 员 后 代 
个 数 的 分 布 具有 和 母 画 数 g(s). 第 二 代 每 个 成 员 后 代 个 数 的 分 布 具 有 和 母 函 数 f(s). 再 下 一 代 
母 次 数 又 是 g(s). 母 三 数 如 此 一 代 代 更 替 下 去 . 

试 由 基本 原理 ( 即 不 利用 8.5 节 和 8.6 节 多 维 理 论 一 般 结 果 ) 确定 该 过 程 的 消失 概率 和 
第 n 代 粒 子 的 平均 数 . 铬 过 程 初始 母 函 数 为 g(s). 然后 以 同样 方式 更 普 , 所 求 这 些 量 是 否 改 
杰 ? 

9. 对 于 任 一 离散 时 间 分 支 过 程 Xn, Xo = 1 证 明 不 等 式 


Pr{Xn > 工 对 于 某 些 0< nmilxXnm =0} < [Pr{Xnm = ON*. 
10. 考虑 一 分 支 过 程 , 其 初始 时 刻 含有 NN 个 个 体 , 概率 母 郴 数 为 


p(s)=g+ps, 4,p>0,g9+p=1. 


试 确定 群体 消失 的 首 达 时 间 了 的 概率 分 布 . 
答案 : Pr{ 人 = 人 = 人 (1 一品) 六 一 (人 一 2 下 
11. 计算 Var[X(t)], 其 中 X 是 连续 时 间 分 支 过 程 且 X(0) = 1. 


问 题 395 


u(t) — wu (1) ev (TD)t wu (lI)t 1 
ee DD， 着 w() #0 


2 (1)}t 者 (1)==0 


12. 设 一 群体 是 由 上 肉 的 和 梭 的 两 种 类 型 个 体 组 成. 如 果 群 体 中 至 少 有 一 个 雄性 , 则 所 有 
瞧 性 能 够 产生 后 代 , 其 后 代数 目的 母 函数 为 f(z). 若 一 后 代 是 峻 的 概率 为 a, 并 已 知 至 少 也 
有 -雄性 产生 , 试 求 下 一 代 崔 性 数目 的 概率 母 了 数 
, flas + (1— 0) 一 aa 
Si 


VarlX(t)| = | 


加 是 


1. 为 研究 泌尿 过 程 引 入 下 面 模型 . 假设 细菌 增长 依照 参数 和 的 Yule 过 程 ( 见 4.1 节 ). 
在 每 单位 时 间 , 现存 的 每 一 个 细菌 以 概率 p 消灭 . 试 求 在 时 刻 ”时 细菌 存留 数 的 概率 母 函 
数 . 

提示 : 这 是 分 支 过 程 第 n 代 的 母 函 数 . 

答 娄 : fn(s) 是 下 面 函 数 的 第 n 次 迭代 


e 3 
/9) = Tr 
2，(a) 一 成 熟 个 体 依 概率 母 函 数 f(s) 产生 后 代 . 假设 一 群体 有 上 个 不 成 熟 个 体 , 每 个 
以 概率 p 成 熟 , 然后 独立 地 繁殖 其 他 个 体 . 试 求 下 一 代 (不 成 熟 ) 个 体 数 的 概率 母 函 数 , 

(b) 知已 知 现在 这 一 代 有 大 个 成 熟 个 体 , 试 求 下 一 代 成 熟 个 体 数 的 概率 母 函 数 , 
答案 : (a) (1 -2p 二 pH(s)) ii (b) (fF(1 — p+ ps)). 
3. 证 明 在 问题 2 中 , (a) 和 (b) 的 分 布 有 相同 均值 但 不 一 定 有 相同 方差. 
4. 考虑 一 离散 时 间 分 支 过 程 {X,}, 其 概率 母 函 数 为 


1 +o 2 0O<c<bic<l 


p(s) 一 1 1 一 


其 中 (1 一 8 一 co)/c(1 一 c) > 1. 设 Xo = 1. 试 确定 条 件 极限 分 布 ; 


lim Pr{X, = kXn > 0}. 


1V/1\ 1~b—ce 
ee 
5. 在 上 一 问题 中 假设 1 一 b 一 c= cl(1 一 c). 试 确 定 PrfX > 0}. 
答案 : (1 一 co)/[l + (nr 1)d. 
6. 在 向 题 5 相同 条 件 下 , 证 明 Pr{Xn < nz|Xn > 0} 收敛 于 一 指数 分 布 . 
提示 : 在 条 件 zn > 0 之 下 计算 Xn/n 的 拉 普 拉 斯 变换 , 并 求 其 当 n 一 oo 时 的 极限 . 
答案 : 参数 为 (1 一 c)/c 的 指数 分 布 . 
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7. 设 一 连续 时 间 分 支 过 程 具有 无 限 小 母 函 数 
u(s) = 和 一 5 (k 为 不 小 于 2 的 整数 ). 


试 求 其 母 函 数 p(t; s). 

提示 : 解 

EES) (y(t;s)), (0;s) =s 
答案 : p(t,s) = sle(t-Dt (elk-Dt 1)sk-1]-1/(-1) 
8. 若 连 续 时 间 分 支 过 程 的 无 限 小 母 函数 是 
uls)=1—-s~— Vi-s, 

试 求 其 母 函数 p(t; s). 

答案 : p(t;s)=1— [1 -et?+e 2Vi— so?. 

9. 考虑 多 生 Yule 过 程 , 群体 的 每 个 成 员 在 长 度 为 h 的 时 间 区 间 内 以 概率 Bh + o(h) 产 
生 上 个 新 的 成 员 , 并 以 概率 (1 一 8h + o(h)) 不 产生 新 的 成 员 (6 > 0,k 为 正 整 数 ). 设 在 时 刻 
0 及 个 成 员 . 

(a) 设 XX(t) 是 至 时 刻 t 分裂 的 数目 , 试 确定 (X(t)) 增长 的 状态 . 

(b) 设 mm 是 第 ”次 分 裂 时 间 , 求 mm 的 密度 函数 . 

提示 : (a) 注意 


prfm < thr 1 =€} = | ep 人 一 Nt 人 《St 
e>t 
并 得 到 用 7。_: 密度 函数 表示 的 rs 密度 函数 的 递归 公式 


BIKG] _N 
(a) RB ?EE to00. 
(b) 记 7 的 概率 密度 函数 为 f(t), 则 
_ N(N+k):£.£.[N+ (n— 1)k] 
fn(t) = ne 


10. 设 Xn,n > 0, 是 概率 母 函数 为 p(s) 的 分 支 过 程 , 其 前 n 代 个 体 总 数 ， 定义 为 ， 


Be NPt(]l etn 


遇 
tn 一 0 十 汪 1 十 十 Xn nn 二 0,1,2,.…,XXo 二 1,， 
设 二 (s) 是 3 的 概率 母 函数 , 试 证 明 
Fr(s) = sp(Fn(s)), n= 0,1,2,.... 


11. 设 一 分 文 过 程 在 初始 时 刻 仅 有 一 个 个 体 , 其 单个 个 体 后 代数 目的 母 函 数 为 p(s), p(s) 
的 第 ”次 送 代 记 为 pn(s). 此 外 , 每 代 有 个 体 迁 入 , 其 概率 母 函数 为 h(s). 考虑 有 迁 入 的 分 
文 过 程 , 其 转移 概率 矩阵 被 下 式 所 确定 : 


> Pi;s’ = |[p(sj + h(s). 


rn 


试 证 明 其 第 步 转移 概率 矩阵 被 下 式 所 确定 ， 
》 PDs’ = [pn(S)]ih(pn_1(s)h(pn_2(s) -+ h(p(s))h(s). 


12. 在 有 迁 入 的 分 支 过 程 中 (问题 11), 假定 Y (1) = m < 1. 试 证 明 其 对 应 的 马尔 可 夫 
链 具 有 和 母 函数 为 x(s) = 》 mr3 的 平稳 概率 分 布 , 并 且 r(s) 满足 函数 方程 


人 一 日 二 
"(p(s))h(s) = T(5)， 


13. 在 问题 12 中 , 大 指定 p(s) = gq 十 ps(0 <p<1,g++p 二 1) 和 h(s) = es” ', 试 确定 其 
平稳 概率 分 布 

14. 考虑 简单 生 灭 过 程 (无 迁 入 线性 增长 过 程 ), 即 和 = Xn 和 jr = jpn, 其 中 入 > 
0,4 > 0 且 4> 入 设 2( 是 时 刻 t 群 体 的 含量 . 此 外 , 有 一 无 限 服务 的 排队 过 程 , 顾客 到 达 
间隔 时 间 分 布 为 1 - erxt 而 服务 时 间 分 布 为 1 -e-，. 试 证 明 该 排队 过 程 的 忙碌 期 和 在 初 
始 条 件 Z(0) = 1 下 的 / Z(t)dt 具有 相同 的 分 布 


15. 设 Xv 为 离散 分 支 过 程 , 其 对 应 的 概率 母 函 数 为 p(s), 令 pn(s)=》 Pr{ Xn =}s*， 
天 二 0 
并 设 p'(1) > 1. 现 令 X 表示 具有 无 限 世 代 的 第 n 代 粒 子 总 数 . 试 证 X 的 概率 母 函 数 是 


DPr{X = k|Xo = Xo = 1}s" = Oe 
其 中 g 是 消失 概率 . 
提示 : 注意 , 对 于 k>1 有 


pr( 元 = k, Xn 一 中 Xo = 1)} 
工 x 一 Xo 一 = 一 二 
Pp {Xn k|X 1, Xo 1} pri TX i 
16. 下 面 问题 目的 在 于 确定 不 同形 式 的 死亡 对 群体 稳定 性 的 影响 ， 所谓 稳定 性 定义 为 
无 限 残 存 的 概率 =1- 最 终 消失 的 概率 . 
我 们 暂时 考虑 无 另外 死亡 情况 . 单独 个 体 后 代数 X 具有 概率 分 布 


Pr{X =k}=p, k=0,1,.... 


设 分 布 均 值 为 m, 群体 中 所 有 后 代 相 互 独立 且 同 分 布 . 

下 面 考虑 三 种 类 型 死亡 方式 . 在 每 种 情况 下 , 一 个 体 幸存 的 概率 均 为 p, 但 各 取 不 同形 
式 . 设 mp>1. 

(a) 个 别 死亡 : 其 发 生 独 了 并 于 其 他 个 体 , 每 个 个 体 幸存 的 概率 为 p. 换 句 话说 , 着 给 定 一 
个 体 的 后 代数 XX( 例 如 一 胎生 下 的 动物 数 ), 其 实际 存活 后 代 个 体 数 服从 参数 为 (X,p) 的 二 
项 分 布 . 这 种 形式 死亡 可 能 出 现 于 成 年 撒 食 性 动物 . 
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(b) 胎 死 , 其 发 生 独 立 于 别 的 胎 , 每 胎 以 概率 p 存留 或 以 概率 g = 1 - p 死亡 . 即 , 若 给 
定 个 体 数 为 X 的 一 胎 , 则 这 一 胎 实 际 数 以 概率 p 为 六, 以 概率 g 为 0. 这 种 形式 死亡 可 能 
出 现 于 幼年 捕食 性 动物 或 鸟 类 的 锥 和 和 蛋 . 

(c) 整 代 死亡 : 整 代 以 概率 p 幸存 或 以 概率 4 全 部 死亡 . 这 种 类 型 的 死亡 可 能 出 现 于 诸 
如 森林 火灾 , 洪水 等 自然 灾害 的 影响 . 

每 种 情况 下 试 确定 1- 稳定 性 =Pr{ 最 终 消 失 } 的 方程 式 , 由 此 回答 哪 一 类 群体 是 最 稳 
定 的 ? 哪 一 类 是 最 不 稳定 的 ? 您 能 否 证 之 ? 


附 1C 


本 章 写 作 的 灵感 源 于 T. Harris 关于 分 支 过 程 的 专题 论文 加. [1] 还 包含 了 有 
关 分 支 过 程 及 其 应 用 的 丰富 文献 目录 . 
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第 9 章 平稳 过 程 


平稳 过 程 是 概率 规律 不 随时 间 (有 时 是 空间 ) 改变 而 变化 的 随机 过 程 . 这 个 概 
念 描述 了 无 固有 时 间 起 点 (空间 原点 ) 的 物理 系统 的 上 自然 特性 . 对 于 诸如 通讯 理论 、 
天 文学 、 生 物 学 、 生 态 学 以 及 经 济 学 中 出 现 的 大 晤 过 程 , 这 种 假设 是 适当 的 . 

平稳 性 在 理论 上 导致 了 许多 重要 结论 . 本 章 我 们 致力 于 预测 问题 、 遍 历 性 、 平 
稳 过 程 的 谱 表 示 、 平 稳 点 过 程 以 及 水 平 交叉 问题 . 9.1 节 和 9.2 节 是 后 面 各 节 的 预 
备 知 识 . 9.3 节 和 9.4 节 是 关于 预测 理论 , 9.5 节 和 9.6 节 是 关于 遍历 理论 ， 9.7 节 和 
9.8 节 关 于 谱 分 析 , 9.9 节 和 9.10 节 关 于 点 过 程 和 水 平 交 叉 问 题 , 这 些 内 容 读者 可 根 
据 需 要 按 任意 顺序 阅读 . 


9.1 定义 和 例子 


设 了 是 抽象 指标 集 , 且 了 中 任意 两 点 之 和 仍然 属于 了 . 通常 工 是 非 负 整 数 集 
合 {0,1,…}, 但 它 也 可 以 是 整 条 直线 、 正 半 轴 \ 平面 、 有 限 维 空间 、 球 面 , 或 者 甚至 
是 无 限 维 空间 . z 

定义 1.1 平稳 过 程 是 这 样 一 个 随机 过 程 {X(t),t e T}, 对 于 任何 正 整数 上 和 
7 中 任意 点 碧 ， 丰 及 几 


{X(t1), “"") X (te)} 
的 联合 分 布 与 
{X(t +h),.. ,X(te + h)} 
的 联合 分 布 相同 . 
下 面 是 一 些 简单 例子 : 


(a) 在 通信 理论 中 电子 脉冲 通常 假设 是 一 个 平稳 过 程 . 当然 , 在 任何 物理 系统 
中 , 在 信号 的 开始 都 有 一 个 过 渡 时 间 . 由 于 这 个 过 渡 时 间 比 之 信号 长 度 是 很 短 的 时 
间 , 因而 平稳 模型 是 适用 的 . 在 电子 通讯 理论 中 , 电位 和 电流 通常 都 用 复 变量 来 表 
示 . 这 时 , 我 们 会 遇 到 复 值 平稳 过 程 . 

(b) 星球 和 星系 的 空间 分 布 , 植物 和 动物 的 平面 分 布 , 常常 是 平稳 的 . 这 里 了 可 
以 是 欧 几 里 得 空间 . 球面 或 者 平面 . 

对 于 海浪 的 高 度 也 可 以 假设 是 平稳 分 布 , 7 取 作 经 纬度 , 仍然 是 二 维 的 . 
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(c) 经 济 时 间 序 列 , 例如 失业 人 数 , 国民 生产 总 值 , 国民 收入 等 等 , 通常 假设 对 应 
于 一 个 平稳 过 程 , 至 少 对 已 经 实现 的 长 期 增长 作 某 种 修正 之 后 是 这 样 一 个 过 程 

如 上 述 例子 所 说 明 的 , 平稳 过 程 以 各 种 各 样 形式 大 量 出 现 . 处 理 最 一 般 的 情况 
与 本 书 仅 提供 一 个 导 引 的 初衷 相 违背 . 已 经 提醒 读者 注意 广泛 的 范围 , 下 面 我 们 主 
要 集中 在 实 值 过 程 并 且 = {0,1,2,…} 的 简单 情况 . 

设 {X(t),t € T} 是 平稳 过 程 . 如 果 均 值 m(t) = BE[X(t)] 存在 , 则 这 个 量 必 须 
是 常数 , 即 对 所 有 t,m(t) = m. 类 似 地 , 如 果 二 阶 矩 E[X()”] 是 有 限 的 , 则 方差 
oz = EB[(X(t) 一 m)*] 是 与 时 间 无 关 的 常数 . 设 上 和 s 是 两 个 时 刻 , 不 失 一 般 性 , 假设 
t > s. 利用 平稳 性 , 我 们 计算 协 方差 


El(X(t) —m)(X(s) —m)] = EL(X(t— s) ~ m)(X(0) 一 mp 中 
其 右 端 仅 仅 依赖 于 差 t 一 s. 如 果 我 们 定义 协 方差 函数 
R(h) = EL(X(h) — m)(X(0) 一 各 外 


风 
EI(X(t) -m)(X(e) — m)] = R(t sl). 
自然 , o? = R(0). 把 协 方差 标准 化 便 得 到 所 谓 的 相关 函数 或 自 相关 函数 , 其 定义 如 
下 
ptu) = 训 Rlu) = R(u)/R(O) 


显然 p(0) = 1. 可 以 证 明 (利用 施 瓦 效 不 等 式 ) 对 于 所 有 的 勾 有 一 1 < p(w) <&1. 

定义 1.1 给 出 的 平稳 概念 包含 了 过 程 的 所 有 有 限 维 的 分 布 . 出 于 种 种 目的 , 我 
们 希望 有 一 个 实用 的 比较 弱 的 概念 , 它 仅 仅 包含 前 两 阶 矩 . 

定义 1.2 ”一 个 随机 过 程 {X ,teET] 称 为 协 方正 平稳 过 程 , 如 果 它 的 二 阶 宅 
有 限 , B[X(t)2] < co, 均值 为 常数 和 全 = E[X(t)], 并 且 协 方差 E[(X(2) 一 m)(X(s) 一 m)] 
仅 依赖 于 时 间 差 |t ~ sl. 

在 文献 中 还 使 用 与 协 方差 平稳 同 义 的 术语 是 弱 平 稳 或 宽 平 稳 . 为 强调 区 别 , 定 
义 1.1 引入 的 平稳 过 程 常常 称 为 严格 平稳 的 . 

具有 有 限 二 阶 矩 的 平稳 过 程 是 协 方差 平稳 的 (当然 , 平稳 过 程 可 能 没有 有 有限 
矩 ). 一 个 协 方差 平稳 过 程 很 可 能 不 是 平稳 的 , 但 有 一 个 重要 例外 ， 一 个 随机 过 程 
{X(t),t eT}, 对 于 任意 k 和 每 个 有 限时 间 和 集合 {本 ,to,…, 太 ), 随机 癌 量 


(X(t1), | ,X(tk)) 


具有 多 元 正 态 分 布 (第 1 章 ), 则 称 为 高 斯 过 程 . 由 于 多 元 正 态 分 布 是 由 它 的 前 两 阶 
矩 所 决定 , 即 由 均值 向 量 和 协 方差 矩阵 所 决定 , 因此 协 方差 平稳 的 高 斯 过 程 必定 是 
严格 平稳 过 程 . 
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例子 
下 面 几 个 例子 将 在 以 后 进一步 加 以 讨论 . 
A. 两 个 极端 的 平稳 过 程 


1) 独立 同 分 布 随机 变量 序列 加 ,六 是 平稳 过 程 . 如 果 ,了 ，…: 的 共同 分 
布 具 有 有 限 方差 o“, 则 过 程 是 协 方差 平稳 的 , 协 方差 函数 是 


2 Y 一 
nu-| 0“， 对 于 v = 0， 


0 对 于 ww 冯 0. 
(ii) 考虑 另 一 个 完全 不 同 的 平稳 过 程 , 令 2 是 具有 已 知 分 布 的 单一 随机 变量 ， 
置 Z0 二 2Z1= 22 二 … 二 2. 显而易见 , 过程 {Zn} 是 平稳 的 . 如 果 随 机 变量 Z 具有 


有 限 方差 , 则 过 程 是 协 方差 平稳 的 , 并 且 协 方差 郴 数 
R(u) = o2， 对 于 所 有 的 wv. 


从 许多 方面 来 说 , {Yn} 和 {Zr} 是 两 个 极端 的 例子 , 它们 可 以 用 来 说 明 平稳 过 
程 性 质 的 极 大 差异 . 例如 , 已 知 共同 分 布 , 观测 Yo, 关 ,… ,Ys 对 预报 Yi+1 不 会 提供 
任何 信息 , 而 只 要 观测 2Zo 就 能 准确 预报 21, 22,…. 另外 , 我 们 还 可 以 从 另 一 方面 
说 明 上 述 两 个 过 程 是 相反 的 . 假设 Y 具有 有 限 均 值 , 利用 大 数 定理 , 样本 平均 值 


~ (Yo 十 … 十 癌 ,-1) 
收敛 于 常数 m = BE[Yo]. 但 对 于 过 程 {2Z%}, 则 没有 这 样 的 收敛 性 . 事实 上 
~{Z0+ .+ Go] = 40 = 4, 


即 ”个 样本 平均 值 的 “随机 性 ”与 第 一 个 观测 时 是 一 样 的 . 

由 过 程 构成 的 样本 平均 值 收敛 于 过 程 的 某 个 基本 参数 ， 这 样 的 性 质 称 为 是 遍历 的 . 
对 遍历 过 程 的 基本 参数 作出 推断 , 并 不 需要 对 整个 过 程 或 样本 轨道 进行 反复 多 次 的 
独立 观察 . 相反 , 我 们 只 需要 观测 过 程 的 一 个 单一 实现 , 不 过 要 有 足够 长 的 时 间 . 因 
此 在 实际 中 一 个 重要 课题 是 确定 在 什么 条 件 下 平稳 过 程 是 遍历 的 . 

令 人 意外 的 是 , 这 两 个 性 质 相反 的 例子 却 具有 相关 联 的 起 因 . 对 于 协 方差 平稳 
过 程 , 这 两 种 情况 问题 症结 都 在 于 当时 间 差 |t 一 s| 变 大 时 协 方差 函数 R(t 一 s|) 是 
后 收敛 于 0, 如 果 它 收敛 于 0, 其 收敛 速度 为 何 . 对 于 过 程 {3}, 收敛 速度 是 非常 快 
的 , 因为 当时 间 差 不 小 于 1 工时 协 方差 恰 为 0, 而 对 于 过 程 {2Z%} 不 论 时 间 差 取 什 么 值 
相关 函数 都 是 1. 

平稳 过 程 理 论 的 基本 目的 是 阐述 介 于 上 述 两 个 极端 例子 之 间 的 大 量 平稳 过 程 
的 遍历 性 质 和 预测 问题 . 平稳 过 程 的 一 般 预 测 问 题 在 本 章 的 9.3 节 和 9.4 节 中 研究 ， 
样本 平均 秆 的 收敛 性 在 9.5 节 和 9.6 节 中 详细 叙述 . 
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B. 三 角 多 项 式 


平稳 过 程 的 某 些 有 趣 例 子 可 以 由 具有 随机 振幅 三 角 表 达 式 得 到 . 设 A 和 B 是 
均值 为 0、 方差 为 o? 的 同 分 布 随机 变量 , 我 们 假设 4 和 B 是 不 相关 的 , 即 E[4B| = 
0. 固定 一 个 频率 w E [0,zt] 并 对 n == 0, 士 1 十 2 … 定义 


Xn = Acos(wn)+ Bsin(wn). 
则 对 于 所 有 的 n, E[X，] = 0, 利用 三 角 恒等式 
cos(a ~— B) = cosa cos f+ sin a sin 6b, 
以 及 E[AB] = 0, 我 们 求 得 协 方差 为 
E|Xn Xn 
= El{Acoswn+ Bsinwn}{Acosw(n+u) + Bsinw(n + uu) 
= E[A?coswncosw(n+u) + B?sinwnsinw(n+ u)| 


一 COS WH. 


由 于 Xn 和 Xn+u 的 协 方差 显然 仅 依赖 于 时 间 差 %, 我 们 断定 过 程 是 协 方差 平稳 的 . 
如 果 4 和 B 具有 均值 为 0 和 方差 为 o? 的 正 态 分 布 , 则 过 程 是 高 斯 的 , 因而 是 严格 
平稳 的 . 

特别 地 , 对 于 频率 w = 0, 我 们 有 coswn = 1 和 sinwn = 0, 所 以 对 于 所 有 的 
n, Xn 二 4. 这 样 , 前 面 例子 中 的 过 程 {2%} 在 这 里 就 出 现 了 . 

更 加 一 般 地 , 令 4o, 41,…, An, 和 Bo, Bi,:…, Bn 有 中信 的 且 不 相关 
的 随机 变量 . 假设 4; 和 B; 具有 共同 的 方差 o? ,并 令 0? 二 0 十 … 十 o%. 取 wo， 
wi,'… ,wm 为 0, 可 中 不 同 的 频率 , 并 对 于 n = 0, 土 1, 土 2,… 置 


及， 二 SA COS nwk 十 Bk sin nwx}. 
k=0 
由 于 系数 {4k} 和 {Bi} 不 相关 且 均 值 为 0, 我 们 有 E[A4iBjy] = 0 和 E[AiAk| = 
五 [B;,Bk] = 0,k 冯 i. 我 们 计算 协 方差 


了 和 人 
EIXnXnt+ul=E p30 cos nwr 十 Br sin oj (Ea cos(n + Uw; 
k= 二 0 7 二 0 
+ B; sin(n + wu)w; ) 


mm 
一 >》 E[Az COS Wk COS(N 十 也 Jp 十 Bz? sin nwx sin(n + wu)wk] 
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OU COS Uk. 


| 
WsE 


ll 
© 


因此 , 此 过 程 也 是 协 方差 平稳 的 . 
继而 令 pk = ox/o”, 记 协 方差 函数 为 
R(u) = o2 和风 COS Wwk. (1.1) 
k=0 
则 px 表示 频率 wx 在 协 方差 中 的 贡献 . 注意 到 {px} 是 离散 概率 分 布 , 即 zx > 0 和 
2》_,Pk = 1, 由 此 提示 我 们 把 (1.1) 推广 到 频率 连续 的 情形 , 其 形式 为 


R(u) = 0o* 上 cos(ww)dF '(w), (1.2) 


其 中 F(w) 是 取 值 于 [0, 7 的 随机 变量 的 分 布 函 数 . 在 9.7 节 中 , 我 们 将 看 到 这 样 的 
推广 确实 是 可 能 的 , 并 且 最 一 般 的 协 方差 平稳 过 程 都 具有 这 种 表达 式 . 在 玉 对 应 于 
[0, 7] 上 均 久 分布 的 特殊 情况 下 , 意味 着 所 有 频率 出 现 的 可 能 性 是 相同 的 . 我 们 计算 


R(u) = 2 人 cos{uw )dw 


| cc， 如 果 w=0， 
0, 如 果 #0. 


这 是 前 述 例子 中 独立 同 分 布 序列 {Y%} 的 协 方差 函数 . 这 里 再 一 次 体现 出 {Y.} 和 
{Zn} 具有 某 种 意义 的 相对 性 , {Zn} 对 应 于 单一 频率 w = 0, 而 {Yn} 对 应 于 在 fo,n] 
均 习 分 布 的 频率 . 
C. 滑动 平均 过 程 


令 {&n :n= 0, 土 1, 土 2,…} 是 具有 共同 均值 j 和 方差 c2 的 不 相关 随机 变量 序 
列 . ol a2…,am 是 任意 实数 , 考虑 由 下 式 定 义 的 过 程 
An 一 aitn 十 026n 1 十 … 十 Qmén—m+1l: 

我 们 有 

ElXn] = pla1 + :+ amj 
和 

Var[Xn| = a2(a1 十 … 十 a2 )， 

记 & = 弘一 .计算 其 协 方差 


忆 Je 


bE 
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= [e nin) B see] | 
i=1 j=1 


人 £2 


~ 十 … 十 Qav+101&2] 看 um-l, 
0, 看 公关 7 

| canan-e 二 二 aolal)， 若 um-1， 
0, 各 之 mm. 


由 于 Xn 和 Xn+w 的 协 方差 仅 依赖 于 延迟 时 间 ,而 并 不 依赖 于 n, 所 以 过 程 是 协 方 
老 平 稳 的 . 


协 方 差 函数 变 为 
no- 上 eb) uS mo—l, 


0, i 之 mm. 


当 m = 1 时 对 应 于 例 A 中 的 不 相关 随机 变量 序列 {Yh}. 粗略 地 说 , 另 一 个 极端 


D. 圆周 上 的 平稳 过 程 
设 U,V 是 具有 和 零 均值 和 单位 方差 的 独立 正 态 分 布 随机 变量 . 令 了 = [0,27], 对 
于 teET 定义 一 个 双 变 量 过 程 X = (Y( 引 ,2()), 其 中 
Y(t) = Usint+V cost, 
Z(t) = —U cost+V sint, 
则 (X(b),t & 了 ) 是 平稳 过 程 . 显然 , EIY 的 ] = E[Z(t) = 0, 并 且 对 于 所 有 的 t 有 


sin*t 十 cos2t = 1,- 故 EI[Y(t)?2] = E[Z(t)?| = 1. 由 于 Y(t) 和 2(t) 具有 联合 正 态 分 
布 , 为 了 完全 确定 它们 的 分 布 , 我 们 只 要 计算 它们 的 协 方差 . 但 是 , 显然 


EIY(t)Z(t)] = 0 
这 样 , X(t) 的 分 布 与 X(t +9) 的 分 布 相同 , 其 中 0 是 任意 的 . 对 于 任意 向 量 (X 伯 )， 
E. 平稳 马尔 可 夫 链 


在 第 3 章 我 们 曾经 证 明 在 很 一 般 的 条 件 下 , 一 个 马尔 可 夫 链 {Xn} 渐 趋 于 一 个 
平衡 的 统计 波动 系统 , 而 时 间 n 和 初始 状态 Xo 最 后 将 不 起 什么 作用 . 更 加 精确 地 


HE Pt 


dO oh 
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说 , 在 我 们 给 出 的 条 件 下 , 当 n 变 大 时 , 分 布 Pr{Xn = jlXo = 针 将 通 近 于 一 个 不 依 
赖 寺 i 的 常数 zj. 现在 假设 我 们 正在 观察 这 样 一 个 系统 , 它 从 无 穷 远 的 过 去 开始 发 
展 且 现在 正 处 于 平衡 状态 . 这 样 对 任何 ”= 0, 土 1, 土 2,…,X" 的 概率 分 布 不 依赖 于 
n. 确实 , Pr{Xn = 让 = zij, 所 以 这 个 概率 , 或 Xn 的 边缘 分 布 在 不 依赖 于 n 的 意义 
下 是 平稳 的 . 类 似 地 , (Xn, XXn+1) 的 联合 分 布 也 不 依赖 于 mw 它 可 以 由 下 式 给 出 


Pr{X», = i, Xnti = I} = Pr{iXn = Pr{Xnti = jiXn = i} = AiPy, 


其 中 P= |BPi;| 是 马尔 可 夫 链 的 转移 概率 窍 阵 ， 显然 , 我 们 可 以 继续 说 明 对 任意 固 
定 的 上 = 1,2,.…， 联合 分 布 (Xn, Xnti, ,ntk) 不 依赖 于 n. 

类 似 地 , 令 {X,n = 0,1,…} 是 马尔 可 夫 链 , 现 按照 平稳 分 布 x; 选取 其 初始 状 
态 Xo, 同 理 可 证 {Xn} 是 一 个 平稳 过 程 


9.2 ”平均 平方 距离 
由 于 “ 协 方差 平稳 ” 是 一 个 仅 利用 随机 过 程 前 两 阶 矩 定义 的 性 质 , 因此 我 们 也 


希 鹿 仅 利 用 前 两 阶 逢 来 度量 任意 两 个 随机 变量 Y, 2 的 差异 或 “距离 ”. 对 这 样 一 个 


度量 的 目 然 选择 就 是 平均 平方 差 E[(Y - 2) 门 , 或 者 平均 平方 差 的 平方 根 , 后 者 的 好 
处 就 是 与 原来 的 度量 单位 保持 一 致 . 为 了 更 好 地 表达 这 个 距离 , 引进 记号 


I2l=vEl2Z] 和 1Y -2Z1= vEl(Y -2)5). 


这 样 , 我 们 就 可 以 用 平均 平方 差 的 平方 根 上 Xi 一 Xi+x| 来 度量 区 .yx 作为 随机 变 
量 Xi+x 的 预测 的 能 力 . 另外 , 利用 这 个 距离 度量 我 们 可 导出 随机 变量 序列 相应 的 
收 伍 性 概念 ， 一 个 随机 变量 序列 {Xn} 称 为 收敛 于 随机 变量 X, 如 果 平 均 平 方差 
E[(Xn 一 X)?] 当 n 无 限 增 大 时 趋 于 0, 其 正式 定义 如 下 : 

定义 2.1 设 久 ,XX1, 2,… 是 一 列 随 机 变量 . 我 们 说 {Xn} 平均 平方 收敛 于 
六, 记 为 六 一 (ms.) 或 im Xn 二 于 (ms.), 如 果 

(i) 对 于 所 有 的 n, BLX2] < oo， 

的 im EI(X - X)] = 0( 或 等 价 地 ，lim |Xn - X| = 0) 

下 面 是 平均 平方 距离 (以 下 简称 均 方 距离 ) 和 平均 平方 收 伍 (以 下 简称 均 方 收 
敛 ) 的 一 些 初等 性 质 . 其 中 , Y, 2 是 任意 两 个 具有 有 限 二 阶 罕 的 随机 变量 , 而 y,z 是 
任意 实数 . 

施 瓦 兹 不 等 式 


因为 
2lyz| < yy +22. (2.1) 
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这 个 不 等 式 对 于 任意 实数 对 y, * 成 立 , 所 以 当 它 们 的 值 被 随机 选择 时 不 等 式 也 成 立 ， 
即 


2lY Z| < |Y|? + |21. 


两 边 取 期 望 , 我 们 得 到 
2E[lY Z|] < 如 | 站 十 至 [2 
特别 地 , EIY 2 < oo. 者 我 们 在 〈2.5 中 用 


Y/VEIY 们 = 了 代替 y， 
21V EZ = 2/12Z14 代替 z， 


并 取 期 望 , 得 , , 
了 了 2 |- 
2 {Ta} < {rE} + {Tap} -> 
因此 
EllY Z| < Vv ELIY ?IEI2°] 二 二 人 
这 就 是 著名 的 施 瓦 兹 不 等 式 . 
平行 四 边 形 公式 
我 们 计算 
El(Y + 2)2| = ElY? +2Y2 + 27) 
= FlY?] +2E[lY2] + E[2Z2?), 
和 
El(Y ~ 2)*] = ElY? ~ 2Y2Z + 2 
= ElY?*] — 2E[Y 2Z] + E[2’), 
把 两 式 相 加 可 得 到 平行 四 边 形 公式 
El(Y + 2)°] + E[(Y -2 =25[72]+2B[2 
或 


lIY + ZE +iY - 21 =2{7 人 十 12 分 . (2.2) 


这 个 名 字源 于 几何 中 类 似 的 等 式 : 平行 四 边 形 两 条 对 角 线 的 平方 和 等 于 它 的 四 边 
的 平方 和 , 在 那里 了 ,2 是 问 量 . 


I 
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三 角 不 等 式 
我 们 计算 
El(Y + 2)] = E[lY*] + 2E[YZ]) + E[27]. 
由 施 瓦 效 不 等 式 
ElY2] < EllY Z| < VElY BIZ. 
因此 
IY + Zh < ELY”] +2VEIY?]E[(22] + El2°] = (YL + 120D’, 

或 


lY + ZI < |Yt+ 12 (2.3) 
其 名 字源 于 几何 类 似 的 不 等 式 : 一 个 三 角形 任意 两 边 长 度 之 和 总 是 想 过 第 三 边 . 只 
要 注意 到 上 |21 相当 于 空间 问 量 通常 长 度 的 概念 ， 三 角形 不 等 式 的 另 一 种 形式 有 时 
会 更 加 有 用 : 
YT -1zDls 把 一 好 (2.4) 
这 是 由 (2.3) 得 到 的 , 如 辣 我 们 从 |a 十 6| < la| + |6| 推 得 |(|a| - 四) < la 一 6| 一 样 . 
m.s。 极限 的 唯一 性 
如 果 在 三 角 不 等 式 (2.3) 中 置 Y= Xn 一 革 和 2Z= 针 一 Xn, 得 
区 一 XSD 


这 样 , 如 果 Xn 一半 (m.s.) 和 Xn 一半 ‘ms.), 则 E[(X 一 站] 王八 一式 时 =0. 利 
用 切 比 雪夫 不 等 式 , 我 们 有 


Pr{|X - X'| > e} < El(X _ XY e>0. 
因此 对 所 有 的 正 数 ,Pr{|XX 一 外 > e} = 0, 于 是 
Pr{X = X=1. (2.5) 
因此 , 随机 变量 序列 均 方 收敛 的 极限 在 (2.5) 意义 下 是 唯一 的 . 
依 概 率 收 全 
再 次 利用 切 比 雪夫 不 等 式 
Pr{|X, — X| > el < Bl(X _X)Y, >0. 
我 们 看 到 , 由 X 一 X(m.s.) 推 知 对 任意 正 数 e， 
im Pr{| xn — X| > e} = 0， 


因此 , 均 方 收敛 到 涵 著 依 概率 收敛 . 注意 , 反之 不 一 定 成 立 ! 
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二 阶 矩 的 收敛 
现在 我 们 对 Y = X 应 用 三 角 不 等 式 (2.4), 有 
[1X1- IXxl| < IX — Xn1 = 0. 
因此 
im | xn = 1X.. 
于 是 , 均 方 收敛 可 推 得 二 阶 矩 收敛 . 显然 , 反之 不 一 定 成 立 
柯 西 收敛 准则 
如 果 在 (2.2) 中 置 Y=X。- 基 和 2Z= XX -XX, 便 得 到 


E[(Xn — Xm)] < 2E[(Xn — X)] + 2E[(Xm 一 大) 


因此 , 如 果 Xn 一半 (m.s.), 则 

,lim E[(X— Xm)]=0 
或 

lim [Xn — Xm| = 0. 

有 反之, 可 以 证 明 如 采 {Xn} 是 随机 变量 序列 且 满 足 

lim El(X» — Xm)"] =0, 
则 存在 一 个 随机 变量 X 使 得 

Xn — X(m.s.). 

这 个 结果 与 实数 列 的 柯 西 收敛 准则 是 平行 的 . 


均值 的 收敛 
利用 施 瓦 兹 不 等 式 , 令 2 三 1, 我 们 有 


EllY|] = EllY 1) < v EY?):1= 1, 


(2.6) 


这 样 , 如 果 E[Y?] < co, 则 有 E[|Y] < oo. 用 类 似 方式 令 Y = X。 一 X, 我 们 计算 


IE[Xn] — EIX]| < El|Xn, — XI < [|X 一 你 | 
这 样 , 当 n 一 oo 时 , Xn 一 左 (m.s.) 蕴涵 着 


im ElXn| = E[X]. 
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协 方差 的 收敛 


设 {Xs} 是 均 方 收 敛 于 随机 变量 X 的 随机 变量 序列 . 令 Y 是 具有 有 限 二 阶 逢 的 
随机 变量 . 我 们 将 证 明 lim 已 YXn] = E[YX], 或 等 价 地 ,lim |EIYXn] - ElYX]| = 
0. 我 们 使 用 施 瓦 效 不 等 式 


IE[Y Xn] — ElY X]| = |E[Y (X», — X)| < TY HIX, — X|. 


由 于 BIY*] < oo 和 |X 一 XX 一 0. 这 就 完成 了 证 明 . 
目 回 归 和 背 动 平均 过 程 
令 {Xn;n = 0, 土 1, 土 2,…} 是 协 方差 平稳 过 程 . 假设 对 于 满足 | 和 | < 1 的 某 个 实 
数 入 随机 变量 序列 
En = Xn — AXn-1 


是 不 相关 的 , 且 具 有 零 均值 和 共同 的 方差 oa*. 这 样 一 个 过 程 称 为 1 阶 自 回归 过 程 . 
我 们 有 
人 An 一 和 人 入 mn-1 十 En 
= A{AXn-2 + én-1} + 


= XXn_2 + An_l1+ én 
k—1 

= NXnk+ YNény. (2.7) 
j=0 


k—1 
我 们 计算 Xn 与 》 和 6%-; 之 间 的 平均 平方 差 , 得 到 


j=0 


2 
k—1 
已 ( >》 we] 
7 二 0 


由 于 过 程 是 平稳 的 , 即 E[X2_,] 是 常数 , 与 n 和 上 无关, 并 由 于 | 和 | < 1, 右边 部 分 
以 几何 比率 递减 趋 于 0. 这 样 ， 


= EI|( 和 MX,_x)] 


天 一 
Xn = lim DN én (m.s.) 
用 一 


>》 NN én- (2.8) 


I=0 


4o4 
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ooc k—1 
应 当 记 住 》 是 指 部 分 和 序列 》 均 方 收敛 的 极限 . 等 式 (2.8) 把 原来 的 过 程 表示 


7 一 0 7=0 
为 滑动 平均 ( 见 本 节 的 例 C). 
由 于 均 方 收敛 性 界 涵 着 均值 的 收 钱 和 二 阶 矩 的 收敛 , 我 们 有 
k—1 
ElXn 一 lim E B ve = 0， 
j=0 
并 且 


EIX2] = lim E [B ve / 


: k—1 
a al 
j= i#j 


由 于 序列 {tm} 是 不 相关 的 , 第 二 项 的 期 望 为 0. 由 E[&2_,] = o2? 和 | 和 | < 1, 我 们 得 
到 


k—1 
EIX2?] = lm 2 M0 
j=0 


= 02/(1 IAP). 
现 计算 全 和 ntk 的 协 方 差 . 由 (2.7) 得 
k—1 
Kntk = Kn + ,NEéntk-j 
7 二 0 


因此 


EI[X» Xnik]| = MEIX2]+E .》、 vows . 


上 式 右边 第 一 项 是 入 o?. 利用 协 方差 收敛 , 第 二 项 可 按 通常 方法 求 值 , 即 


kl tt—1 k—1 
E >》 wor 本 me 了 A en-m 2, pe 
j=0 mm 二 0 二 0 


i—1 天 一 1 
i mt+y . 
一 im 》 2 Elén—mén+k—i| 
m=0 7 一 0 
一 0, 
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其 中 我 们 多 次 利用 了 {é&m} 不 相关 这 个 事实 . 这 样 
EI[XnXnik] = 0 /1 — [AN), k=0,1,2,.... 
我 们 继续 往 下 讨论 , 把 过 程 写成 


An = ANXn-1 + én, 


这 提示 我 们 协 方差 平稳 过 程 的 自然 推广 具有 如 下 形式 
六 nn 一 A1AXn-1 十 和 2 入 mm 一 2 十 …… 十 ApAn-p 十 Sn， (2.9) 


其 中 {&} 是 零 均值 不 相关 的 随机 变量 序列 , 具有 共同 的 方差 . 这 样 一 个 过 程 称 为 p 
阶 目 回归 过 程 . 

对 于 这 样 一 个 过 程 , 由 线性 回归 理论 可 猜测 当 已 知 过 去 Xn 1 Xn-2,… 时 对 于 
Xn 的 预测 量 可 能 由 下 面 公式 给 出 


及 -一 人 1 及 一 十 十 Ap Xn_p. 


但 这 未 必 成 立 . 关键 在 于 对 和 过 去 (X。_1,:… ,Xn_p) 的 相关 性 . 这 种 预测 问题 是 
下 一 节 要 讨论 的 . 这 里 我 们 仅 为 了 确定 什么 情况 下 p 阶 自 回归 过 程 具 有 滑动 平均 表 
示 做 一 些 准备 工作 . 
往 前 一 个 时 间 单 位 , (2.9) 变 为 
An-1i 三 AlAn-2 十 A2An-3 十 … 十 Ap 入 np-1 十 Sn 一 1， 
把 此 式 代 回 (2.9) 得 到 


Xn 一 AllA1Xn -2 + + ApXn pl + én-1l 
十 X2Xn -2 十 … 十 XpXn_p 十 名 
=én 二 Aién-1 + (A 二 A2)Xn-2 二 +…… 
十 (Ai1Ap-1 十 Mp)Xn_p 十 AlAp 及 np 一 1. 


按 此 步骤 进行 m 次 , 我 们 得 到 


入 nn 一 cn 十 01c -1 十 …… 十 Omén-m 十 miXn--m-_1 
十 Gm2X 一 ?1 一 十 … 十 mpXn—m-—p; (2.10) 


这 里 和 Bm i 是 某 些 常数 . (每 次 奉 代 在 右边 留 下 2p 个 连续 的 Xm). 然后 将 


及 nm-1 一 En—m-—1 十 A1AXn-m-2 十 … 十 Ap 上 nm-p-1 
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代入 (2.10) 得 到 
从 mn 一 En 十 016n -1 十 …… 十 Omén—m 十 Bmién_m-!1 


+ (BmiAl 十 Bm2) Xn— m2 十." 
+ (BmiMp_1 十 Bmp)¥ n—m—p 十 BmiAN\p Xn 一 ?了 一 六 一 荆 ， 
由 此 我 们 导出 递归 关系 式 
Om+1 一 = Cn1， 
Om+1,; 一 Dm1A; 十 Bm,j+1) 7 一 |， 一 1 
且 
Onp 一 bmiAp. 
把 这 个 步骤 连续 进行 下 去 , 得 到 滑动 平均 表达 式 
Xn= 》 én-k, 60=1, (2.11) 
k=0 


倘 乔 当 m 一 oo 时 其 余 项 Rn = (Bmi1Xn_m-1 十 … 十 BmpXn_m-p) 依 均 方 意义 可 
忽略 . 下 面 我 们 即将 给 出 使 (2.11) 成 立 的 适当 条 件 . 

上 述 过 程 在 抽象 符号 下 将 显得 更 加 整齐 . 设 人 是 位 移 算 子 , 它 把 实数 列 {z} = 
(… ,Tl,T0,T1,…) 变 为 序列 T({znaj = (… ,zo,Z1,72,…)( 这 里 zi 处 于 零 坐标 )， 
每 个 时 间 坐 标 都 问 前 移动 一 个 单位 . 自然 , T-! 的 功能 相反 : 


Ti({zn}) = (.…, £2, Z-1.70) 小 


{xn}) = (0, Tk Tk TFL 小， 
在 这 些 记号 下 , (2.9) 变 为 
{Xn} = AT {Xn}) + + MpT?({X,}) + {én} 


一 >》 ArT—K({X,}) 十 {én}， 


此 一 ] 


(-: yxT- 由 (xD)= {én}, 


=1 
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p 
其 中 了 = 了 是 但 等 算 子 . 现在 来 看 在 什么 条 件 下 ( 一 >》 Nr 可 道 , 使 得 我 们 
k=]1 
有 一 荆 
{Xn} = ( 一 DT) ({én}). 


k=1 
即 , 如 果 ， ， 
Xn 一) 6ikn_ 或 {Xn} = (> ar ({én}), 
i=0 i=0 
则 5 应 该 是 下 列 展开 式 的 系数 


( 一 ~ wa 一 Ga. 
k=1 k=0 
因此 , 形式 上 可 利用 长 除法 来 确定 它们 . 例如 ， 对 我 们 先前 讨论 过 的 情况 : Xi = 
和 ,和 x = 二 0 对 于 之 2, 我们 有 
一 二 1 十 和 z 十 入 2z 十 和 2 十:…， 
或 wo 
入 nm 一 >》 Nén-y 
j=0 
这 个 已 由 (2.8) 得 到 . 
经 过 元 长 的 直接 计算 我 们 有 
] 


-一 加 YY 
pV 二 1] 十 01Z 十 … 十 bm2Z” 十 Tm(z)， 


其 中 
Bmiz™tl+ .+ Bnpe™t? 

1 一 入 2Z 一 … 一 Apzp 
即 , 形式 上 的 除法 正好 得 到 我 们 前 面 通 过 直接 代入 法 所 得 到 的 相同 结果 .由 此 推 
得 , 如 果 当 m 一 oo 时 rm(z) 一 0, 则 每 个 6mx 一 0,k = 1,…,p, 并 且 随 机 余 项 
hm, 一 miXn—m-1l 十 … + DmpXn_m-p 均 方 趋 于 0, 所 以 无 限 滑 动 平均 表达 式 (2.11) 
是 正确 的 . 我 们 下 面 给 出 条 件 . 方程 


TP —AMr? 一 … 一 Xp =0 (2.12) 


rm(zZ) = 


有 op 个 根 : Ll"*' ,Lp: 如 果 zi| < 1,1= 1,...,p, 则 


1— Mz -Mp7 =0 
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的 根 是 as = 1/zi, 倘若 和 关 0 且 |z| > 1 对 于 任何 满足 |z| < min |zi| 的 z 级 数 


绝对 收 钱 . 因此 , 当 m 一 co 时 对 于 |z| < mini |zi|( 特 别 地 , 当 |z| = 1 时 ), rm(z) 一 0. 
由 此 推 得 当 m 一 oo 时 对 于 天 = 1,2,…,p, Bmk 一 0. 这 时 Rm 均 方 收敛 于 0. 所 以 
无 限 滑动 平均 表达 式 (2.11) 成 立 . 

为 了 以 后 参考 用 , 基于 前 面 分 析 , 我 们 强调 一 个 重要 结论 : 

附注 2.1 假定 {Xn} 是 零 均值 协 方差 平稳 过 程 且 满 足 


An 一 Al1An 1 十 … 十 Ap 有 np 十 en n 二 0, 土 1,.…，, 
其 中 {é&,} 是 零 均值 不 相关 随机 变量 序列 , 且 和 1,…, 和 是 固定 的 . 如 果 
ZP ~ Aiv?! 一 AMyp 一 0 


的 每 个 根 Ti 1? 二 有 bi < 1， 则 En 和 (Xn_1,: ;np) 是 不 相关 的 . 这 
是 由 于 Xn_k = 》,6jén-k-i(k > 1) 中 的 各 项 与 如 依 假设 是 不 相关 的 . 


j=0 


为 了 了 解 含有 相反 方向 滑动 平均 的 另 一 种 情况 , 我 们 看 一 看 
Xn = Tn + prmn+1 + pnp2 十， (2.13) 
其 中 , |p| < 1 且 {mn} 是 零 均值 不 相关 的 . 那么 
pXn=Xn-i~?m-l， 或 Xn = AXn-l+én, 


其 中 ， 入 一 1/p, Sn 一 一 Dj 一 1. 由 于 {én} 是 不 相关 的 ， 所 以 {Xn} 是 目 回归 过 程 ， 但 
| > 1 排除 了 形 如 (2.11) 的 滑动 平均 表达 式 . 在 (2.13) 中 过 程 的 构造 是 向 前 方向 
的 滑动 平均 , 当 (2.12) 的 根 按 绝 对 值 全 部 超过 1 时 ， 王 现 出 典型 性 奈 当 (2.12) 的 根 


的 绝对 值 位 于 1 的 两 侧 , 为 表示 {Xn} 要 使 用 双 无 限 滑动 平均 》 ”64En_. 最 后 ， 
大 一 一 co 


如 果 每 个 根 的 绝对 值 都 正好 为 1, 则 满足 (2.9) 的 自 回归 过 程 将 不 再 是 平稳 的 (除了 
平凡 情形 én 三 0). 
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日 问 归 和 滑动 平均 模型 可 以 结合 起 来 产生 更 加 复杂 的 平稳 过 程 . 我 们 可 以 假设 
入 hn = A1An-1 十 …… 十 Ap 入 mp 十 Tn， 
其 中 


Tn = Qién 十 ca26n -1 十 十 Qmknm+l， 
是 一 个 滑动 平均 . 更 加 一 般 地 , 我 们 可 以 考虑 
Ln = Xn En) 


其 中 {en} 是 一 个 不 相关 的 “噪声 ”过 程 . 这 些 比 较 复杂 模型 的 分 析 是 十 分 困难 的 . 
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出 现在 很 多 领域 中 的 一 个 问题 是 关于 预测 将 要 观察 的 给 定 随 机 变量 值 的 问题 . 
报纸 上 常 第 报导 关于 将 来 国民 生产 总 值 、 就 业 人 数 、 日 用 品 价格 和 其 他 经 济 量 的 预 
测 值 . 控制 问题 , 例如 过 程控 制 , 也 隐 含 着 涉及 到 预测 . 如 果 一 个 过 程 的 预测 结果 不 
令 人 满意 , 可 通过 控制 或 改革 使 过 程 与 我 们 的 希望 更 加 接近 . 

本 节 讨 论 关 于 平稳 随机 过 程 的 预测 问题 . 假设 在 时 刻 n= ……, 一 2, 一 1,0, 1,2,… 
我 们 所 关心 的 量 构 成 一 个 平稳 过 程 {Xn}. 现在 要 根据 已 观测 的 值 Xn, Xn-1, 关 nz， 
… 来 预测 Xnti, 或 者 更 加 一 般 地 预测 X44k. 这 就 是 平稳 过 程 的 预测 问题 或 外 推 问 
题 . 


一 般 预 出 理论 


设 X 表示 某 个 “试验 ” 的 结果 . 假设 XX 是 未 知 的 , 是 将 要 观测 的 , 现在 希望 预 
测 将 要 出 现 的 X 的 值 . 设 侈 是 X 的 预测 值 . 预测 误差 为 和 - 六, 我 们 希望 这 个 误 
差 在 某 种 意义 下 尽 可 能 的 小 . 这 时 马上 会 出 现 一 个 问题 ,“ 小 ” 是 什么 意思 ? 一 般 地 
说 , X -区 是 一 个 随机 变量 , 因此 我 们 所 说 的 小 是 按 平均 意义 , 即 误差 的 某 个 函数 的 
期 望 值 应 当 是 小 的 . 究竟 应 选择 误差 的 什么 函数 呢 ? 比较 合理 的 要 求 是 此 函数 当 误 
差 为 0 时 取 最 小 值 , 随 着 误差 绝对 值 的 增 大 而 增加 . 在 本 节 , 我 们 利用 平均 平方 误差 
E[(X -多 人 引 = |X 一 侈 12 作为 衡量 标准 . 这 个 标准 体现 了 大 误差 比 小 误差 影响 强烈 
这 个 合理 的 要 求 . 然而 更 重要 的 是 , 这 个 标准 在 数学 上 便于 处 理 , 我 们 将 会 看 到 , 它 
”能 使 一 般 预 测 理论 得 以 发 展 , 例如 , 在 若干 特定 情况 下 能 导出 最 佳 预测 直接 表达 式 . 

这 样 , 我 们 的 问题 是 在 所 有 预测 量 全 中 寻找 使 平均 平方 误差 EB[(X 一 荔 )?] 最 小 
的 预测 量 . 为 了 使 得 描述 完备 , 我 们 必须 给 定 所 允许 的 预测 量 类 , 以 便 在 该 类 中 寻 
求 最 佳 的 预测 量 . 一 般 来 说 , 这 个 类 是 由 所 涉及 的 试验 或 X 的 分 布 所 提供 的 信息 来 
确定 的 . 下 面 我 们 用 下 来 表示 所 有 允许 的 预测 量 类 . 
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例 (i) 令 半 为 试验 结果 , 已 知 其 均值 为 jy, 方差 为 o2. 在 均 方 意义 下 并 且 在 
缺乏 更 多 信息 的 情况 下 , X 的 最 佳 预测 是 基 = /. 由 于 对 X 没有 更 多 的 信息 可 用 ， 
我 们 取 预 测量 空间 H 为 实数 集合 . 即 可 以 选择 任何 实数 a 作为 X 的 预测 值 . 我 们 
计算 

EI[(X — X)*] = E[((X — p+y— 
= E[(X ~ 1)]+2E[(X -p(n — X) + El(y — XY). 
已 知 , B[(X 一 pj)?] = o2, 并 且 由 于 入 是 固定 实数 , 所 以 E[(j 一 全 )?] = (0 一念)2 是 
E[((X —p)(y— X) = (4— XEIX -WH] =0. 从而, 
E[(X — X)*] = 0 + (p— RY. 
由 此 立刻 推 得 ， 当 置 叉 = 4 时 , 均 方 误差 最 小 . 这 样 , 在 没有 更 多 信息 的 情况 下 , 随 
机 变量 X 最 小 均 方 误差 预测 量 是 它 的 均值 上 = E[X1]. 

(i 现在 令 X,Y 是 具有 有 限 方差 和 已 知 联合 分 布 的 随机 变量 . 我 们 假设 是 
由 对 了 的 一 次 观测 来 预测 的 . 例如 , 钢 的 拉力 强度 的 预测 可 通过 观测 它 的 硬度 ; 物 
理 量 如 压力 、 温度 等 等 , 其 实际 值 可 根据 带 有 随机 误差 测量 值 来 预测 . 

由 于 我 们 假设 Y 是 可 观测 的 , 并 且 关于 X 的 结果 没有 更 多 信息 可 用 (除了 知 
道 其 联合 分 布 之 外 ), 我 们 允许 任何 具有 有 限 方差 的 函数 区 = f(Y) 作为 其 预测 量 . 

这 时 可 能 会 猜想 , 在 观察 值 Y = y 之 后 , 我 们 处 于 与 例 (i) 相同 的 情况 , 只 是 在 
第 二 种 情况 下 相应 的 分 布 是 已 知 Y = y 情况 下 X 的 条 件 分 布 . 因此 最 小 均 方 误差 
预测 量 应 该 是 和 关于 条 件 分 布 的 均值 uxjy = E[X| 门 . 事实 确实 如 此 . 我 们 计算 

El(X — X)” 
= E[((X — pxiy)]+2E[(X — pxly)(uxly — X)] 
+ El(jxly 一 X)3]. 


我 们 证 明 在 右边 的 中 间 项 的 期 望 为 0. 注意 到 pxir 和 站 是 Y 的 函数 , 由 于 EI(X 一 
uxlrv)lY| = EIX|IY] -jxjy = 0. 我们 有 
El(X ~ pxly)(pxly — X) 

= E{E[(X — jxly)(uxiy ~ X)|Y]} 

= E{(uxly — X)EI(X ~ pxiy)lY]} 

= 0, 
这 样 ， 

E[((X — X):] = El((X ~ xy)*]+ El(uxyy — X)), 
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右边 部 分 当 XX = E[X|Y] 时 取得 最 小 值 

(ii) 为 了 计算 区 = E[X|Y], 我 们 需要 知道 X,Y 联合 分 布 的 全 部 信息 . 即使 这 
些 信 息 可 以 得 到 , 导出 公式 常常 也 是 太 复杂 而 不 便于 实际 求 值 . 在 研究 协 方差 平稳 
过 程 中 , 我 们 假定 仅 知道 前 两 阶 矩 的 信息 , 而 不 提供 联合 分 布 其 他 进一步 的 信息 . 因 
此 希望 有 一 个 预测 理论 , 既 能 得 到 简单 的 预测 公式 , 又 只 需要 前 两 阶 矩 的 信息 .这 
就 是 所 谓 的 线性 预测 . 设 X、Y 分 别 具 有 均值 kx 、pr， 方差 o2、o2 以 及 协 方差 
oxy = BI(X jx)(Y -py)]. 我 们 要 求 用 Y 的 线性 函数 作为 X 的 预测 量 , 例如 
X = a 十 bY, 或 等 价 地 ,区 =a+bY -py), 其 中 a 和 5。 是 任意 实数 . 由 于 本 例 的 允 
许 预测 类 比例 () 中 的 小 , 因此 所 导出 的 最 小 均 方 预测 的 误差 不 会 比例 (i) 中 的 小 ， 
很 可 能 会 比较 大 . 然而 预测 公式 是 线性 的 , 比较 简单 , 并 且 下 面 我 们 将 指出 , 最 佳 系 
数 由 已 知 的 矩 就 能 确定 , 不 必 知 道 整 个 联合 分 布 . 下 面 我 们 来 证 明 , 用 Y 预测 X 的 
最 佳 线性 预测 公式 是 

X* = jx 十 和 — Ly). 


今 
=a+t+b(Y -py), 
且 注 意 到 ， 
X* =a + py) 463 
其 中 ， 0 二 HxX—u, b 一 (axy /oy) —b. 同 前 面 一 样 ， 计算 


EI(X — X)” 
= E[((X — X*)?] +2E[(X — X*)(K* — KX)] + EI(X* -RE)2]. 
我 们 证 明 右 边 第 二 项 为 0. 事实 上 ， 
E[(X — X*)(X* — X) 
= BU(X -px)— EY -pr)} x {e+ HY py) 
= El(X ~ hx)— 人 一 Ar)] 
+b EX — px)(Y — ky)— 六 一 Ar) 
一 0 十 以 (or 一 0 


= 0. 


E[(X — 2] = EI(X 一 倪 *)?] + 百 [( 过 * - 驹 )2] 
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并 且 右 边 部 分 当 区 = XX* 时 最 小 . 这 样 , X* 就 是 所 求 的 最 小 均 方 误差 线性 预测 量 

有 一 个 重要 的 特殊 情况 , 最 小 均 方 误差 的 线性 预测 量 在 线性 的 限制 下 并 没有 降 
低 预 测 效 果 . 如 果 和 和 Y 具有 联合 正 态 分 布 , 则 如 第 1 章 所 指出 的 那样 , 已 知 
Y = y,X 的 条 件 均值 是 


To 
EIXIY =y = px + (yhY). 
Y 


我 们 看 到 这 个 最 佳 预 测量 是 y 的 线性 函数 . 这 样 , 如 果 X 和 YY 具有 联合 正 态 分 布 ， 
在 已 知 Y 的 条 件 下 , X 的 最 小 均 方 误差 线性 预测 量 事实 上 就 是 最 小 均 方 误差 预测 
量 . 

上 面 这 些 例子 给 出 了 一 种 模式 : 在 每 种 情况 下 , 为 了 说 明 给 定 的 预测 量 允 * 是 
最 佳 的 , 问题 的 关键 都 在 于 证 明 叉 积 E[(X - 区 *)( 生 * 一 充 )] 为 零 . 我 们 可 将 此 归结 
为 下 面 的 最 小 均 方 误 差 预 测定 理 : 

定理 3.1 ” 设 X 是 具有 有 限 二 阶 矩 的 随机 变量 , 令 也 是 允许 预测 量 你 的 空 
间 , 即 某 个 具有 有 限 二 阶 矩 随机 变量 区 的 集合 . 假设 H 是 如 下 意义 下 的 线性 空间 
当 X 和 Xs 是 预测 量 而 a 是 实数 时 , 则 o 区 ; + 和 也 可 作为 预测 量 . 那么 

(i) 预测 量 X* 具有 最 小 均 方 误差 当 且 仅 当 对 于 每 个 预测 量 U, E[(X- 基 *)U]=0; 

(ii) 如 果 最 小 均 方 误差 预测 量 存在 , 它 在 均 方 距离 意义 下 是 唯一 的 , 即 , 如 果 驳 ， 
和 名 > 是 最 小 均 方 误差 预测 量 , 则 E[( 估 + 一 爹 ;)?] = 0 

(ii) 最 小 均 方 误差 预测 量 存在 的 充分 条 件 是 , H 在 如 下 意义 下 是 闭 的 ， 如果 
和 mn = 0,1,… 是 一 列 均 方 收敛 于 随机 变量 对 的 预测 量 , 则 驳 也 是 预测 量 . 

证 明 (i) 假设 多 * 是 一 个 预测 量 , E[(X 一 区 *).U] = 0 对 每 个 预测 量 U 成 立 . 
我 们 来 证 明 区 * 是 具有 最 小 均 方 误差 的 预测 量 . 令 对 是 任意 一 个 允许 的 预测 量 , 计 
算 


EI(X — X)*] = EI(X ~ X*)2] + 2E[((X — eR*)(K* -RR) + EI(R* -eR)2]. 


置 U = X* -人 则 U 也 是 一 个 预测 量 , 这 是 因为 X* 和 区 都 是 预测 量 , 其 任意 线 
性 组 合 还 是 一 个 允许 的 预测 量 . 这 样 ， 


EI(X — 名 *)(%* — 2)] = EI(X - ®*)U] =0, 


El(X 一 区 = E[(X —X*)?] + El(X* — X)3]. 


因此 ， 
E[(X — X)*] 总 (一 人 3 
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即 和 * 的 均 方 误差 比 任何 其 他 预测 量 X 都 来 得 小 . 故 对 * 是 最 小 均 方 误差 预测 量 
另 一 方面 , 给 定 预测 量 区 *, 假设 EB[(X 一 苹 *).U] = a 关 0 对 某 个 预测 量 U 成 
立 . 我 们 将 证 明 


=X* + BU (3.1) 


具有 较 小 的 均 方 误差 , 因此 苹 * 不 是 最 佳 的 , 这 就 完成 了 (i) 的 证 明 . 首先 注意 到 区 |465 
是 预测 量 的 线性 组 合 , 因而 也 是 一 个 预测 量 . 改写 (3.1) 为 


-一 、 Ck 0 
-X= BalU 


我 们 有 
EI(X — X)*] = E[{(X —X*)—(X—X*)} 
= E[(X — X*)2] — 2E[(X — X*)(X — X*)] + EI[(X — X*)2), 
于 是 得 到 
EI(X — X)] 
= E[((X —X*)*]—2 


X— XU + ElU?) 


可 可 [BT 


= E[(X — XX*)?] — BA 
< El(X— 区 ) |. 
即 我 们 证 明了 号 具有 较 小 的 均 方 误差 . 

(i) 为 了 证 明 最 小 均 方 误差 预测 量 是 唯一 的 , 我 们 假设 鞠 ? 和 XX} 都 具有 最 小 
均 方 误差 . 则 对 于 所 有 预测 量 UU 有 E[(X - *)U] = EI[XU -XtU] = EIXU] -~ 
E[X*U] = E[XU| = EI[X*U), 

及 

E[(Xt — X32)U] = 
对 于 所 有 的 预测 量 U 都 成 立 . 我 们 选择 U = XX} - 对, 得 到 

E[(X? ~ X32)*] =0. (3.2) 
故 , 最 小 均 方 误差 预测 量 在 均 方 距离 的 意义 下 是 唯一 的 . 利用 切 比 雪夫 不 等 式 可 以 
证 明 , 如 本 章 前 面 所 做 一 样 , 由 (3.2) 可 得 


Pr{X* 尖 X*} =0. 


让 
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(ii) 令 d 为 H 中 预测 量 均 方 误差 的 下 确 界 , 即 
d= inf{E[|IX 一 爷们 :车 e HY. 
在 HH 中 我 们 选择 一 列 预 测量 {Xn}, 使 其 均 方 误差 趋 于 d， 
Jim EIIX 一 区 |?] = d. 
对 任意 的 m,n, 我 们 应 用 平行 四 边 形 公式 于 
Y=X-X,, 2=X- rr¥,,, 
得 到 


El|Xm 一 Xnl?2] + E[|2X ~ KX — Xl?] 
= 2E[|X — X,|:] + 2E[X ~ X,,|2]. (3.3) 


由 于 5( 台 + 总) 是 预测 量 , 它 的 均 方 误差 必 超 过 d 因此 ， 

ElI2X - 吕 , — ,l2] = 4EIIX (名 + 人 ,)|?] > 4d 
将 此 式 代 入 (3.3) 得 到 

El|Xn, — Xml?] + hd < 2E[|X, ~ 大人] + 2E[|X, — XI]. 
上 式 两 边 同 时 减 去 4d, 并 令 m,n 无 限 增加 , 推 得 

lim PllXm — Xn 

< 2 lim El|X, — XX|2] +2 lim El|Xnm — Xl 4d 
= 0. 


由 柯 西 均 方 收敛 准 则 可 知 , 存在 一 个 随机 变量 , 记 为 苹 *, 使 得 XX 一 苹 *(m.s.). 由 
假设 , 区 * 是 一 个 预测 量 . 这 样 多 一, 一 和 一 车 *(m.s.), 并 由 均 方 收敛 下 均 方 距离 
的 连续 性 , 我 们 有 


E[|X — XX*|?] = lim E[|X 一 Xl = ad. 


故 , X* 是 最 小 均 方 误差 预测 量 , 这 就 完成 了 定理 的 证 明 . 二 
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在 例 (一 (十 ) 中 , 我 们 的 工作 是 验证 已 知 的 预测 量 是 最 佳 的 . 现在 我 们 说 明 如 
何其 助 于 上 述 定 理 导出 最 佳 预 测量 . 我 们 使 用 定理 的 第 (i) 部 分 , 即 预测 量具 有 最 
小 均 方 误差 的 充分 必要 条 件 . 在 例 (i) 中 , H 是 实数 的 集合 , 我 们 希望 某 实数 X* 对 
于 所 有 的 实数 久 满足 


EI(X — X*)ul =0, (3.4) 
我 们 只 需要 考 虚 4 = 1 的 情形 , 此 时 


五 [入 X*)] 一 0, 
由 于 XX* 是 非 随机 的 , 所 以 
X* = EIX*] = EIXI= 1. 


而 这 样 选择 的 X* 满足 式 (3.4), 由 此 可 知 葬 * 是 (唯一 ) 最 小 均 方 误差 预测 量 . 
对 于 例 ( 训 , H 是 了 的 所 有 具有 有 限 二 阶 矩 的 函数 区 = f(Y) 的 集合 . 区 *( 它 是 
Y 的 一 个 函数 ) 为 最 佳 的 充分 必要 条 件 是 对 于 所 有 的 具有 有 限 二 阶 矩 函数 f(Y)， 
El((X ~ X*)f(Y)| = 0， 
或 
E[Xf(Y)] = E[X*f(Y)]. 
由 此 推 得 区 * 是 已 知 Y 的 条 件 下 X 的 条 件 期 望 ( 见 第 1 章 ). 于 是 , XY* = EIX|Y 
是 (在 均 方 距离 意义 下 唯一 ) 最 佳 预测 量 . 
在 例 (iii), 条 件 是 对 于 任何 Y 的 线性 薄 数 U, 
EI(X — X*)U| = 0， (3.5) 
我 们 记 UV 和 关 * 的 线性 表示 式 如 下 : 
U =a+b(Y HY), 
X* =a*+b*(Y — yy), 
所 以 式 (3.5) 变 成 
EN{X ~ (a* +b(Y — py)} x {at+b(Y ~ uy) =0. 


这 式 子 必须 对 于 所 有 的 实数 a,b 者 成 立 . 特别 地 , 我 们 先 取 a = 1 和 4b = 0, 然后 取 
EIX— (a +W(Y — pry))] =0, 
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或 
EIX|=o" — bElY 一 pr] = a 
以 及 
EN{X -a —b(Y -pr)}(Y ~- pr) =0, 
或 


E[((X—px)(Y ~ nr) = bE{(Y — pyr)’), 
OxXY = b*oy. 


这 样 , a* = jx 和 b= oxy/oy, 所 以 


一 GT 
X* = jx +-(Y py). 
Oy 


注 记 ”审视 有 限 维 欧 几 里 得 几何 中 某 些 类 似 结果 有 助 于 我 们 更 好 地 理解 在 均 
方 误差 度量 下 为 什么 能 够 发 展 漂亮 的 预测 理论 . 我 们 记得 , 一 个 ( 实 )Bold 体 是 某 个 
以 向 量 为 元 素 的 集合 , 在 其 中 定义 了 向 量 加 法 运算 和 数 乘 运算 , 当 z 与 y 是 该 集合 的 
向 量 而 和 ,是 实数 时 , az 十 by 仍 是 该 集合 的 向 量 . 在 向 量 空间 中 Bold 体 是 一 对 向 
量 xz,y 的 实 值 函 数 , 用 (z, 9 来 表示 , 满足 (z,y) = (y,2), (a171+aQ272,y) = Qa1(7X1,Y) 十 
a2(7z2,y), 以 及 若 x 不 是 零 向 量 (z,z) > 0. 在 一 个 由 积 空间 可 以 定义 向 量 z 的 范 数 
或 长 度 为 (z,z)12, 记 为 |zf. 一 个 Bold 体 是 一 个 完备 的 内 积 空间 , 完备 性 是 在 范 数 
所 确定 的 度量 意义 下 . 这 意味 着 如 果 {zn} 是 一 列 向 量 且 满足 ”lim zn 一 zm| = 0 
则 存在 一 个 向 量 z, 使 得 lim lzn 一 zl = 0 

在 定理 3.1 的 假设 下 , 预测 量 空间 再 是 一 个 希 尔 伯 特 空间 , 其 内 积 是 (X,Y) = 
E| 芝 分]. 空间 于 由 所 有 形 如 aX + 1 的 随机 变量 组 成 , 其 中 a 和。b 是 实 的 , 区 属 
于 H, 即 是 预测 量 , 则 H’' 也 是 一 个 希 尔 伯 特 空间 . 均 方 误差 是 向 量 差 X 一 XX 的 范 
数 或 长 度 的 平方 , 即 它 是 和 区 之 间距 离 的 平方 . 用 希 尔 伯 特 空间 术语 , 我 们 的 问 
题 是 在 HH 中 寻求 一 个 向 量 区 *, 使 其 最 靠近 H' 中 的 向 量 X. 

希 尔 伯 特 空间 是 d 维 欧 几 里 得 空间 的 推广 , 欧 氏 向 量 z = (zi ……,zd),y = 
(y1,… ,ya), 其 内 积 为 (7,y) = ziyi, 范 数 为 欧 几 里 得 距离 jzl| = { > zr2} . 两 个 
向 量 zx,y 夹 角 的 余弦 通常 定义 为 (x,9)/ (zy). 特别 地 , 两 个 向 量 z,y 垂直 当 且 仅 
当 (x,y) =0. 

问题 是 在 空间 H’ 的 子 空间 互 中 求 得 一 个 向 量 XX*, 使 得 它 最 靠近 H’ 的 向 量 
X. 定理 3.1 指出 , 鸡 * 最 靠近 XX 当量 仅 当 差 X - X* 垂直 于 H 中 所 有 向 量 久 . 图 

9-1 帮助 我 们 把 问题 几何 直观 化 . 
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空间 有 H 


图 9-1 图 形 说 明 在 子 空间 下 中 的 向 量 2* 最 靠近 加 量 x 当 且 仅 
当 差 > 一 2* 垂直 于 H 中 所 有 的 量 . 


9.4 ” 协 方 差 平稳 过 程 的 预测 


设 Xn,n = 0, 土 1, 土 2,… 是 协 方差 平稳 过 程 , 它 具 有 已 知 协 方差 函数 R(w),v = 
0, 土 1,.… (其 中 Xn 是 实 值 过 程 ， 因而 R(—u) 一 忆 ().) 过 程 的 均值 是 常数 ， 假设 是 
已 知 的 . 这 样 , 如 果 需 要 , 可 以 改变 原点 , 我 们 不 妨 假设 均值 为 0. 现在 我 们 来 考虑 这 
样 一 个 问题 , 如 何 根 据 有 限 过 去 值 Xn -1 XXn-_2,… ,Xn-p 来 求 得 Xn 的 最 小 均 方 误 
差 线 性 预测 量 ? 设 此 预测 量具 有 形式 


oe, 


An = QiAn_1 二 QoAn-2 十 … 十 OpXn_p. 


利用 定理 3.1 可 知 


ee 


Rr = a Xn 1+ osXn 十 十 axXn 
具有 最 小 均 方 误差 , 当 且 仅 当 对 于 所 有 的 预测 量 


U = WAn-1t+ UAn_2 二 + 十 UpAXn_p, 


我 们 有 
EI(X» ~ X*)U] = 0. 
现在 我 们 来 考虑 关于 U 的 p 个 特别 选取 : 


Ui= Xn-i, i=1,..,p. 
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由 于 任何 预测 量 U 可 以 写 为 U = wi 十 … 十 upUy, 因此 


E[(Xn 一 人 X*)U] =0 对 于 所 有 的 U 成 立 ， 
当 且 仅 当 
E[(Xn — XU =0, i=1,.…,p. 


将 X* 的 表示 式 代入 (4.1), 得 
E[(Xn — {of Xn_1+ osXn_ 2 t+ or Xn_p}) Xn = 0, 
或 
E[Xn, Xn i] = oIE[Xn 1Xn i + :+ os EXn-pXn-i. 
由 于 这 些 叉 积 是 协 方差 , 所 以 我 们 有 
R(i) = oatR(i—1)+...+aR(i—p), i=1,...,p. 
这 样 a* = (af,…,a%) 可 以 取 为 满足 p 个 线性 方程 的 任何 向 量 


R(1) = aiR(O) + osR(1) + osR(2) + + oR(p— 1), 
R(2) = atR(1) + oR(O0) + a$R(1) +:…. + a*R(p — 2), 
R(3) = aiR(2) + oR(1) + a3R(0) 十 十 az 有 RD 一 3)， 


R(p) =atR(p—1)+osR(p—2)+osR(p— 3)+...+ oa:R(O). 


(4.1) 


(4.2) 


定理 3.1 的 (说 ) 断言 在 这 种 情况 下 和 在 一 个 最 小 均 方 误差 预测 量 . (可 以 证 明定 理 
所 要 求 的 假设 是 满足 的 . ) 这 样 , (4.2) 至 少 存在 一 个 解 a*, 或 许可 能 很 多 . 然而 由 定 
理 3.1 的 唯一 性 部 分 知 , 所 有 的 解 都 导出 相同 的 XX*. 作为 例子 , 考虑 9.1 节 中 极端 


过 程 {Zn}, 其 中 Ln 一 Zn 一 0, 土 1,……， 并 且 对 于 所 有 的 4 = 0,+l,.…, R(u) 


2 


二 0 ， 


那么 , 任何 向 量 or 车 满足 of +… + ax = 1, 则 一 定 是 (4.2) 的 解 . 然而 所 有 这 样 的 


向 量 a* 都 导致 2* = 2 
我 们 计算 最 小 均 方 误差 cp 如 下 : 


0 = Pl|X., 一 人 
= E[(Xn ~ X*)(Xn 一 人 
= E[(X" 一 XX)Xn) — El(X" 一 X*)X*]. 
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第 二 项 为 0, 这 是 由 最 佳 预测 量 的 充分 必要 条 件 推 得 的 . 因此 
02 = E[X2] 一 吾 [ 


Dp 
> oo 


大 一 
Pp 
= R(0) — > akR(k). 
k=1 


现在 考虑 根据 全 部 过 去 Xn-_1,Xn-2,… 对 Xn 进行 线性 预测 的 问题 . 我 们 把 所 
有 具有 如 下 形式 的 随机 变量 


= R(0)-—E 


站 一 CG1 及 1 十 “2° 十 QpAn_p, 


作为 预测 量 , 其 中 p 是 任意 正 整数 , cl, a2,… ,ap 是 实数 , 并 且 所 有 这 样 形式 的 随机 
变量 序列 在 均 方 意义 下 的 极限 也 作为 预测 量 . 这 样 的 预测 量 空 间 H 满足 基本 预测 
定理 3.1 的 所 有 条 件 . 显然 , 形 如 


XX, = >》 QkXn_k (4.3) 


k=1 


的 每 个 随机 变量 是 一 个 预测 量 , 倘若 选择 ak 使 得 此 无 限 和 依 均 方 意义 收敛. 利用 
柯 西 准则 于 部 分 和 序列 , 可 以 证 明 只 要 》 akasR(Ik 一 让 < oo, 无 限 和 一 定 收敛 . 然 


k,l 
而 , 并 不 是 每 一 个 有 限 预 测量 的 极限 都 能 表示 为 (4.3) 的 形式 , 这 似乎 与 直观 不 符 
合 , 可 它 却 是 事实 . 


例子 是 容易 举 的 . 设 Z,…C_1, (Co, 0,… 是 一 列 具 有 零 均值 . 单位 方差 的 独立 同 
分 布 随机 变量 . 令 X = 2Z + 心 . 由 均 方 大 数 定理 , 我 们 有 


4 一 2 十 am 一 (Gn 十 …… 十 6n 一 m+1 
= lim 二 (X 十 十 和 mt) 
所 以 在 已 知 所 有 过 去 的 情况 下 Z 是 一 个 允许 预测 量 . 显然 它 还 是 最 佳 的 预测 量 . 但 


2 不 能 够 表示 为 (4.3) 的 形式 . 然而 , 我 们 知道 最 小 均 方 误 差 预 测量 六 * 是 存在 的 . 
在 大 部 分 实际 关心 的 情况 中 , 这 样 一 个 预测 量 有 表达 式 


OO 
X= D> on (4.4) 
kk 二 1 


471 


472 


426 第 9 章 平稳 过 程 
因此 , 花 些 时 间 详 细 研 究 这 种 情况 是 值得 的 . 由 于 对 XX。_1, XX。-_2,… 中 任意 有 限 线 
性 组 合 U, E[(X。 一 关 *)U] = 0, 我 们 必 有 

EI(X», — X*)Xn_k| =0, k=1,2,.... (4.5) 


由 此 推 得 对 每 个 还 
E[(X, — X*)U] = 0， (4.6) 


这 里 7 = wiXn-_i1 十 U2Xn-2 十 … 十 UpXXn-p, 并 由 叉 积 的 连续 性 , (4.6) 对 于 所 有 的 
多 许 预 测量 UD 成 立 . 这 样 (4.5) 提供 了 预测 量 (4.4) 是 最 佳 的 一 个 充分 必要 条 件 . 
现在 我 们 把 这 个 准则 应 用 于 9.2 节 的 目 回 归 过 程 . 假设 {Xn} 是 满足 


Kn = MIX 1 十 .十 XpXn pp 十 名 (4.7) 


的 协 方差 平稳 过 程 , 其 中 入,…, 和 是 固定 的 , {6%} 是 一 列 具有 共同 方差 和 零 均值 
的 不 相关 随机 变量 . 把 (4.7) 写成 


大， 一 学 十 én， 


其 中 ， 


ae 


入 nm 一 Al 从 nl 十 :十 Ap 从 np 
在 附注 2.1 中 我 们 指出 , 若 


zp -Mizp-1 一 … Ms =0 


的 所 有 根 炎 1， 炎 2 ,Vp 有 Ix] < 1, 则 &n 与 Xn_x(k 之 1) 不 相关 . 由 此 推 得 区 是 
Xn 在 已 知 所 有 过 去 条 件 下 的 最 小 均 方 线性 预测 量 , 因为 


El(Xn 一 Xn) Xn_n] = El Xn-k| =0, k=1,2,.., 
即 满足 条 件 (4.5). 
回 到 一 般 人 情况, 假设 存在 一 个 形 如 


区 * 一 > OY Xn (4.8) 
k=} 
的 最 佳 预 测量 . 如 前 面 指出 的 一 样 , 这 不 一 定 成 立 . 但 是 , 由 于 叉 积 在 均 方 极限 下 是 
连续 的 , 将 其 代入 (4.5), 并 交换 期 望 与 和 号 , 推 得 


R(k) = Var Rk -1D), k=1,2,.... (4.9) 
{=1 z 
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如 果 这 个 方程 有 解 (of, a3,…), 且 使 得 所 对 应 的 级 数 (4.8) 依 均 方 收敛 , 则 (4.8) 确 
定 一 个 最 小 均 方 误差 预测 量 . 
例 假设 {Xn,n = 0, 土 1,…} 是 具有 协 方差 函数 


1, 世 一 0, 
ROW=4 MI+X), lvl=l, 
0, | > 473 


的 协 方 差 平稳 过 程 , 其 中 0< 入 <1 方程 (4.9) 变 成 


和 A 和 = (1 十 入 )af + Mo, 
0= Makt_1+ (1+X)ar + AMat ll， 大王 23 


容易 验证 它 的 一 个 解 是 
oar = —(~—A)”, k= 1,2,..…, 
因此 最 小 均 方 误差 线性 预测 量 是 
KX* = 入 X 1 一 X2X 十 MX 3 一 

有 趣 的 是 , 虽然 Xa。 和 Xn_x(k > 2) 是 不 相关 的 , 但 Xn 的 最 佳 线 性 预测 量 与 

过 程 所 有 过 去 有 关 . 
9.5 ” 明 历 理论 和 平稳 过 程 
遍历 定理 指出 随机 过 程 在 一 定 条 件 之 下 关于 时 间 的 平均 


Xn = 一 OK 十 十 和 


当 观 测 周期 次 数 n 很 大 时 将 收敛 . 最 重要 的 遍历 定理 是 关于 独立 同 分 布 且 具有 有 
限 均值 mm = 五] 的 随机 变量 序列 {Xn} 的 强大 数 定理 , 它 断 言 样本 平均 故 。 以 概 
率 1 收敛 于 均值 m. 用 符号 表示 即 为 


Pr{ lim Xn =m}=1. 


平稳 过 程 对 推广 大 数 定理 提供 了 一 个 很 自然 的 条 件 , 因为 这 个 过 程 的 均值 是 常 
数 m = 五 |Xn], 不 依赖 于 时 间 . 
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我 们 暂且 考虑 对 任意 一 个 过 程 估计 其 未 知 的 均值 函数 m(n) = E[X，] 的 问题 . 
一 般 来 说 , 我 们 必须 取 过 程 的 很 大 数目 NN 个 实现 , 壁 如 说 是 


{X#;n = 1,2,.….}, 
XZ;N = 1,2,.….}, 


{XH ;n= 1,2,.….}, 


然后 计算 它们 的 算术 平均 值 

Xn) 一 {Xl+ 二 
用 它们 作为 m(n) 的 估计 量 . 当然 , 如 果 m(n) 是 常数 , 例如 平稳 过 程 即 为 此 情况 , 我 
们 可 以 另外 关于 n 个 时 间 求 平均 , 并 计算 总 平均 值 


其 = -{X0) +… 十 下 (n)} 


然而 , 一 般 襄 来 关键 仍 在 于 估计 过 程 的 均值 需要 整个 过 程 不 同 的 独立 的 实现 . 作为 
比较 , 让 我 们 考虑 对 于 服从 超 历 定理 的 平稳 过 程 {Xn} 相同 的 估计 问题 . 据 遍历 定 
理 ， 

Kn = 二 (和 + + Kn) 一 mm 当 7 一 00. (5.1) 


由 (5.1) 可 知 , 我 们 仅 需 要 观测 过 程 的 单个 实现 , 但 必须 有 足够 长 的 时 间 长 度 . 然后 
利用 X" 作为 常数 均值 m 的 估计 . 平稳 过 程 的 遍历 理论 的 实际 价值 很 大 程度 上 正 
是 由 于 这 个 事实 . 对 于 这 样 的 过 程 , 其 均值 (和 协 方差 本 数 ) 通常 可 以 通过 过 程 的 一 
个 实现 来 估计 . 

本 下 我 们 将 给 出 关于 平稳 过 程 的 两 个 遍历 定理 .如 同 强大 数 定理 和 弱 大 数 定 
理 , 示 爵 定理 也 有 不 同形 式 . 它们 的 区 别 在 于 假设 和 收敛 方式 . 其 中 第 一 个 定理 推 
广 了 弱 大 数 定理 , 适用 于 协 方差 平稳 过 程 , 其 收敛 方式 是 按 均 方 意义 第 二 个 定理 
推广 了 强大 数 定理 , 它 要 求 过程 是 严格 平稳 的 , 其 收敛 方式 是 以 概率 1. 


均 方 遍历 定理 
设 {Xn} 是 协 方差 平稳 过 程 , 其 均值 为 m, 协 方差 函数 为 


Ru) = El{Xnt+u — mHXn — mm} 


心 


一 l 
An = (1+ + Xn). 
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一 种 弱 大 数 定理 指出 , 当 {Xn} 不 相关 时 , X。 在 均 方 意义 下 收 钱 于 mm. 均 方 遍历 
定理 得 到 相同 的 结果 , 只 假设 X;, 是 渐 近 不 相关 的 , 即 协 方差 R(w) 当 4 增 大 时 其 
Cesaro 极限 为 0. 

定理 5.1 假设 {Xn} 是 具有 协 方差 函数 R(w) 的 协 方差 平稳 过 程 , 则 


im 一 iF R(u) = (5.2) 
N ,3 
当 且 仅 当 
im E[(Xw 一 1 六] = 0. (5.3) 


证 明 ”由 于 m= E[Xw], 我 们 可 以 把 (5.3) 看 作 XN 方差 的 极限 , 而 (5.2) 看 作 
XN 和 Xi 协 方差 的 极限 . 这 样 , 定理 前 明了 环 y 的 方差 收 伍 于 0, 当 且 仅 当 XX! 和 
XN 的 协 方差 收敛 于 0. 


今 


= Xn-m 有 Yn= 人 + +Yy) 
然后 , 利用 施 瓦 北 不等式 ， 


ED 站 3 R(u 中 = {E[lYYw]}? 


v=0 
< EIY?]: E[YN] 
= R(0). EI[((XN ~ m)’l. 


这 样 , (5.2) 由 (5.3) 推 得 . 为 了 证 明 相反 的 蕴涵 关系 , 我 们 设 (5.2) 成 立 . 现 计算 
YN= (Yi + + YNy) 


的 方差 , 得 


Y2 十 2 >》, YY 
一 1 天 < 


- 京 忆 | 


] N i-l 
- 遍 txa (0)+2>》 >_R(-k | 


l=1 k=1 


R(u) 一 vato) | . 
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注意 到 
RO) 一 0， 当 N 一 oo 


所 以 我 们 需要 把 注意 力 集 中 在 第 一 项 . 对 于 任意 M < N, 我 们 有 


» Vl » (Mi-1 N i-l 
Na 2 2 RO = 3 (> Tat + >》 0 
[=1 v=0 {=1 u=0 [=M+1l u=0 
任 给 s > 0, 利用 假设 (5.2), 选择 M 使 得 
/一 1 
1 DR <e， 如 果 1>M. 

则 

» ] 三 1 2» NN 

3 2》 lx 7 2 Ru) < 一 > le < 2€ 
上 = 十 1 u=0 !=M+l 
这 样 ， 
» NI-1 » | MI-1 
33 2 2 R(W) < 3 >》 》 Ru) 十 2e. 
{=1 t=0 1!(=1 u=0 
令 N 一 oo, 由 于 M 是 固定 的 , 右边 第 一 项 为 0. 又 因为 e 是 任意 正 数 , 我 们 必 有 
2» Nil 
Hm Wi 2 2 RY) =0 
所 以 EY] 0. 这 就 完成 了 证 明 . 
利用 切 比 雪夫 不 等 式 

Prf|XN -ml>e}< Bm) > 0, 

可 得 (5.3) 蕴涵 车 对 所 有 < > 0， 


im PrfIXN 一 只 | > e = 0， (5.4) 


这 样 , 对 足够 大 的 N, (5.4) 表明 入 y 依 概率 逼近 于 m. 于 是 , 对 未 知 的 均值 给 出 了 一 
个 估计 . 
如 果 相 关 函 数 对 于 充分 大 的 变 得 足够 小 , 即 


lim R(u) = 0， (5.5) 
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则 (5.2) 成 立 , 因为 对 任何 M < N, 我 们 有 


1 入 一 1 1 M—1 ] 六 一 1 
u=0 u=0 uM 
由 于 (5.5), 选取 M 充分 大 右 剖 第 二 项 的 绝对 值 可 小 于 任意 预先 指定 的 <。, 对 于 固定 
的 M, 右边 第 一 项 当 NN 趋 于 无 穷 大 时 变 为 0. 于 是 , (5.5) 是 保证 Xn 收敛 于 均值 
m 的 一 个 充分 条 件 . 
假设 {Xn} 是 具有 均值 为 0 的 协 方差 平稳 过 程 . 相同 的 定理 可 以 用 来 得 到 样本 
平均 协 方差 


Nl1 


] 
Rn(w) = > XEXk+u (5.6) 
k=0 


收敛 于 协 方差 
R(v) = ELXn Xntul. (5.7) 
的 条 件 . 如 果 我 们 记 Wi = XEXktu, 则 (5.6) 变 为 


~、 1 A _ 
Rn(w) = 证 >》 Ws = Ww. 
kk 二 0 


这 样 ,如果 {Wi} 构成 一 个 协 方差 平稳 过 程 ,并且 
了 一 1 
Jim 示 叶 BIT -RD {War ~ RW =0 (5.8) 
{=0 


则 
im El(RN(u) ~ Ra)2] = 0. 


目 然 , 关于 {Wi} 协 方差 所 施加 条 件 也 就 是 对 原来 过 程 {Xn*} 四 阶乘 积 矩 施加 条 件 ， 
这 就 限制 了 上 述 结果 的 一 般 应 用 . 然而 高 斯 过 程 是 由 它 的 均值 和 协 方 差 函 数 确定 的 ， 
这 样 , 对 于 高 斯 过 程 (5.8) 可 以 用 协 方差 来 表述 . 条 件 (5.8) 要 求 


了 一 1 
1 
im 区 之 EI({ XnXnt+u — Rw)}: {XntiXntiru ~ R(u)} = 0， 


此 式 可 归结 为 


T—1 
. 1 
mn 全 2 {BIXn Xn Xn Xntitd) 一 Ru) 人 = 0. 


478 
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而 具有 和 零 均值 的 联合 正 态 分 布 随机 变量 四 阶乘 积 矩 可 由 下 式 给 出 
EIXiX;XEXI| = oijoOkl + OikOjl + OuOjk, 


其 中 oij 是 XX; 和 天) 的 协 方 差 . 这 时 我 们 有 


E[Xn XnruXntiXntitul 一 R(u)’ 十 R(D)’ + RU u)R( 十 u). 


这 样 , 在 高 斯 过 程 的 情况 下 , (5.8) 要 求 


了 一 ] 
了 {RCO + ROU -wR(U+W)} = 0. 


lim 
下 一 oo 二 /二 0 
由 于 对 任意 两 个 实数 a,b, |ab| < a 十 ,所 以 
[IR 一切 有 (LT < RO- wu) + ROU+u)?. 


于 是 


强 涵 着 


1 TT—1 
Ss 2 — 
im 趣 2 R(l+ wu) =0, 


(5.9) 


(5.10) 


因为 这 两 个 和 至 多 只 有 有 限 项 不 同 . 因此 , 若 (5.10) 成 立 可 推 得 (5.9) 成 立 . 于 是 我 


们 证 明了 下 面 的 定理 ; 


定理 5.2 设 {Xn} 是 具有 协 方差 函数 R(w) 且 均 值 为 0 的 高 斯 协 方差 平稳 过 


程 . 如 果 
1 了 一 主 。 
im 元 2, R(u)? = 0, 
im, BllRr(w) — RGo 门 = 0 
其 中 Rr(w) 是 样本 协 方差 函数 


加 1 T—1 
Rr(u) = 二 2》 入 [和 [uv 
l=0 


在 介绍 强 收敛 定理 之 前 , 我 们 来 证 明 一 个 一 般 的 均 方 遍 有 历 定 理 , 
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定理 5.3 ” 设 {Xn} 是 协 方差 平 稳 过 程 , 并 定义 一 时 间 平 均 序列 
Xn 一 ~ (Xi + Xn) 
则 存在 一 随机 变量 X, 它 是 {XX%} 的 均 方 极限 ， 
im II 一斑 | = 0. 
证 明 在 证 明之 前 , 我 们 先 注意 到 , 一 般 来 说 , 极限 X 是 随机 的 , 定理 5.1 给 出 


一 个 使 得 关 不 是 随机 的 而 是 一 个 常数 m = 五 [Xi] 的 充分 必要 条 件 . 
依照 均 方 收敛 的 柯 西 准则 , 为 证 明定 理 只 需 证 明 


lim |X, ~ Xml=0. 


m,n 00 


置 
HN 二 int IAiX) 十 .…: 十 ANXN|, 


其 中 下 确 界 是 对 所 有 满足 和 i 十 … 十 和 AN = 1 的 非 负 数 NX 取 的 . 注意 到 UN 所 LN， 
并 令 
p= lim HN = inf pw. 
不 妨 假 设 m < n, 并 计算 
_ 1 ] 1 J ] 1 
A 
m nn m nn nn n 


一 2| 和 AiX1 十 .…: 十 AnXnl 之 21, 
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其 中 


入 = 地 i=m+1,..…,n. 
自然 , 如 果 m > mw 可 得 到 相同 不 等 式 . 现在 定理 证 明 的 关键 是 在 于 证 明 

lim [Xsl =%, (5.11) 
因为 , 如 果 我 们 能 够 做 到 这 点 , 由 平行 四 边 形 法 则 和 刚刚 证 明 的 不 等 式 , 有 


| ~ Xn = 2 + 2 1 + 
< 2|Xnb + 21X mb — (2p)? 
< 2{Xr0 p+ PP p22)}, 
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且 (5.11) 列 涵 着 右边 趋 于 0. 
这 样 , 我 们 可 集中 验证 (5.11). 任 给 正 数 e, 选择 N 和 和 Xi，……,AN 使 得 
IEX1 二 十 ANXN < yu+e, 
自然 , 其 中 心 关 0 且 和 十 … 十 Aw 王 1. 令 
Yi = ALXk 二 :二 ANXEENL. 
则 {Yx} 是 协 方差 平稳 过 程 , 并 且 


iY p+e, k=1,2,.... 


我 们 计算 
一 ] 
一 (+ + Yn) 
1 
= AX 十 A2 有 2 十:… 十 ANAXN 
十 和 1I 兴 2 十 A2A3 十 .十 ANAN+1I 十 和 
十 和 1IXn 十 和 2 天 n+1 十 … 十 AN 及 N+n 一 1 
一 和 1XX1n 十 M2X2n 十 … 十 ANX Nn, 
其 中 | 
Xkn 一 -Xx 十 关 k+1 十 … 十 汪 k+n 一 1) 


由 于 Xn 二 半 Ln, 和 1 一 1= 一 (和 2 十 … 十 和 nN), 我们 有 


Yn 一 Xn 一 M2 (X2n 一 Xl1n) 十 “… 十 AN(XNn 一 X1n). 
然后 利用 三 角 不 等 式 ， 


IY, 一 XX | < MolXo 一 XLnl 十 .… 十 ANIXNn — XLnl. 


但 是 
[Xin 一 Xinl = -|(X 十 … 十 XkHn-1) 一 (X1 十 … 十 Xn 
= -| Xn 十 :十 和 nk-1 一 和 一 :一 用 
SEE 十 Psi+ Plt + He 
2K 一 2 


一 nn X11 对 于 k= 2,...,N. 
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所 以 


由 此 推 得 


由 于 当 n 一 00 时 Xn 一 Yn4 一 0, 且 是 任意 的 , 我 们 必定 有 

im [Xn = &. 
这 就 验证 了 (5.11), 从 而 完成 了 定理 的 证 明 . 国 
强风 爵 定 理 


程 . 记 样 本 时 间 平 均 为 


六 nn 二 ~(Xo 十 …… 十 从 nm 一 1)， 


则 序列 { 式 。} 以 概率 1 收敛 于 某 个 极限 随机 变量 XX, 即 
Pr{ lim Xn =}=1. 
证 明 令 
久 =limsup 承 ,， 和 斑 , = lim inf X. 


序列 { 又 。} 收敛 事件 自然 就 是 事件 ”= 环 ,, 并 且 它 的 余 事件 , 即 { 又 。} 不 收敛 的 
事件 是 事件 对 > 处,. 令 KK 表示 后 面 这 个 事件 . 我 们 要 证 明 


Pr{K}=0. 


我 们 暂时 先 考虑 使 事件 天 出 现 的 特别 实现 Xo = zxo, Xi = 7z1,…, 则 对 = 7* > 
有， 一 仑 + ， 并 且 必 年 存在 有 理 数 Q < 0, 使 得 


了 >0>aQa> ZE,. 
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由 于 仅 存 在 可 数 多 对 有 理 数 ,我 们 令 (al B81), (ao, B62),… 是 所 有 这 样 性 质 的 数 对 ， 
其 中 ak < Bk. 令 Kk 是 事件 

> Br > or > YX,. 


如 果 事件 天 出 现 , 则 对 某 个 ,事件 Ki 必须 出 现 , 上 面 我 们 刚刚 证 明了 这 一 点 . 反 
之 , 如 果 某 个 Kr 出 现 , 则 事件 K 也 出 现 . 这 样 , K = U Ki, 并 且 


Pr{K} < Spr{Ks} 


k 二 1 


由 此 推 得 , 为 证 明 Pr{K} = 0, 只 需 证 明 对 于 所 有 的 ,Pr{Kk} = 0. 即 我 们 只 需 证 
明 如 果 a 和 6 是 满足 a < 6 的 任意 有 理 数 ， 


Pr{X >6>a>X,}=0. 
令 A 表示 事件 匀 > 6 > a > 又 ,7T(4) 表示 事件 4 的 示 性 随机 变量 ; 
n= 如 果 4 出 现 ， 


0， ”如 果 4 不 出 现 . 
为 证 明 Pr{4} = E[I(4)] = 0, 我 们 首先 要 证 明 不 等 式 

El(Xo— BI(A)| >0 (5.12) 
和 

El(a — Xo)I(A)] > 0. (5.13) 
把 上 两 式 相 加 得 到 

El(la~B)T(A)] >0 
或 


(a — BPr{A} > 0. 
由 于 a < 6. 因 此 Pr{4} = 0, 这 就 完成 了 证 明 . 下 面 我 们 的 目标 是 建立 不 等 式 (5.12) 
和 (5.13). 
显然 (4A) = I(limsup Xn > 和 ”liminf XX < a) 是 整个 序列 六 0, Xi 的 
申 数 . 回忆 起 实数 列 a1,a… 的 上 极限 和 下 极限 分 别 和 任意 位 移 序列 a@k41, Qk+2,…… 
的 上 极限 和 下 极限 相等 , 由 此 推 得 , 对 于 任意 固定 的 上 ， 


1T(4) = I(limsupXr4in >B8 和 limninfXk < oa)， (5.14) 
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因此 1(4) 在 这 个 意义 下 关于 时 间 移 动 是 不 变 的 这 在 后 面 证 明 中 是 很 重要 的 . 
引进 记号 = Xi 一 B,i=0,1,… 且 
Dik = i+ itit+ 二 + Yirk-1l 此 之 1. 
在 Sixk 中 存在 k 个 被 加 项 , 初始 项 是 8. 令 
Min = max{0, Si Sin 


显然 ， 
0<Son 三 yo 十 ,十 好-1=(Xo 十 … 十 天 -1) — np, 
当 且 仅 当 
Xn 一 TI(Xo+… 十 Xn 1)> Ap. 


若 事件 4 出 现 , 则 对 某 个 正 整数 n, 不 等 式 X。> 8 成立 从 而 推 得 事件 
{Mo,n > 0} 对 于 足够 大 的 ”必须 出 现 . 因此 , 我 们 有 


AC UU {Mon, > 0}, 


n= 二 1 


根据 Mon, 的 单调 性 ， 有 


1(A) = lim IT(A)T{Mo,n > 0}, 


其 中 , I{ Mo,n > 0} 照例 表示 事件 {Mo,n > 0} 的 示 性 随机 变量 .最 后 借助 于 假设 
EliYoj < oo, 我 们 可 以 交换 极限 与 期 望 , 因此 得 到 


ElYoI1(A)] = lim ElYoT{Mo,n > 0}7(4)] 
我 们 现在 来 验证 两 个 不 等 式 (5.12) 和 (5.13). 显然 ， 


Min =max{0, S11,.….,S1.n} 
之 D1k, 对 k=1,..……,n—1, 
所 以 
Yo+ Min 之 Yo+ Sk = Sortl, k=1,...,n—1. 
改写 为 
Yo 过 90ok — Min, k=2,...,n. 
由 于 Min 之 0, 所 以 下 式 是 平凡 的 
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Yo 之 Yo — Min, 
上 面 两 个 不 等 式 结合 得 出 
Yo > max{So1,.…, Son} ~ Min, 
由 于 Mon = max{0, So,1,.…, Sonj}, 所 以 
Yo>> Mon 一 Min， 恕 果 Mon>0. 


这 样 ， 
ElYoI{ Mo,n > 0}1(4) 
> El(Mon — Min)T{Mo,n > 0}(A)] 
= E[Mo,nT(A)] ~— E[Mi,nT{Mo,n > 0}1(4)] 
> El[MonT(A)| — E[Mi1,nT(A)), 
其 中 , 最 后 的 不 等 式 是 由 于 Mi。> 0. 前 面 已 指出 事件 4 在 时 间 移 动 下 是 不 变 的 


[ 见 (5.14)] 由 于 过 程 是 平稳 的 ， Mon 和 Min 具有 相同 分 布 ， 因此 五 [Mo nT 4)l 一 
五 [MinT(4)]. 于 是 , 在 上 面 一 串 不 等 式 的 最 左 端 式 子 为 0. 因此 


E[Yo1(A)] = lim E[lYolI{Mon > 0}1(A4)] >0. 


由 于 Yo = Xo 一 6, 我 们 已 经 证 明了 (5.12), 即 E[(Xo 一 8)1(4)] >0. 对 =a-Xx 


应 用 上 面 证 明 方法 得 到 (5.13). 这 就 完成 本 定理 的 证 明 . 国 
附注 5.1 在 强 遍 历 定理 条 件 之 下 , 另外 还 成 立 
im El[l|X, — Xl = 0. (5.15) 
因此 
EI[X|] = 五 [人 = m. (5.16) 


附注 5.2 ”进一步 的 初等 考虑 可 以 得 到 
多 = lim 一 (Xi 十 … 十 大 krn1)， (5.17 ) 


对 每 个 上 = 1, 2 … 成 立 . 另外 , 假设 随机 变量 Xo, Xi 是 独立 的 . 由 于 (5.17), 对 
每 个 及 X 独立 于 Xo,… ,Xk-i, 因此 独立 于 XK. 由 于 X = limAk, 我 们 必定 有 XX 
独立 于 自己 . 这 样 只 有 当 X 是 常数 时 才 有 可 能 (为 什么 ?), 由 (5.16) 知道 这 个 常数 
必 是 m. 这 样 lim X= m 对 于 每 个 具有 有 限 均 值 m 的 独立 同 分 布 随机 变量 序列 
均 成 立 , 这 就 是 强大 数 定理 . 
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强大 数 定理 促使 我 们 寻找 更 加 一 般 的 条 件 使 得 极限 随机 变量 X 是 一 个 常数 . 
在 均 方 遍历 定理 中 , 我 们 曾经 得 到 , 当 且 仅 当 Xn 入 1 是 渐 近 不 相关 时 又 是 一 个 
常数 ,在 条 件 比 较 弱 的 强 思 有 历 定理 中 , 情况 并 不 是 这 样 简单 , 然而 某 些 原则 可 以 确 
定 . 


如 果 z = (zo, 31,…) 是 实数 列 , 令 Tz 表示 移 位 序列 (z1, 7x2,……). 我 们 称 工 是 
移 位 算 子 . 实数 列 构 成 的 集合 4 称 为 移 位 不 变 的， 如 果 Tx 是 4 的 元 素 当 且 仅 当 z 
属于 4. 参看 下 面 几 个 例子 : 


41 = {zx : 对 于 某 个 有 =1,2,… ,zk = Zk+1 = 二.… 二 0}, 
42 = {7 : lim sup 7x», = a}, 
As= {zx:limn (zl ++ in) = b}. 
读者 可 以 验证 41, 4 和 4s 痢 是 移 位 不 变 的 集合 . 
平稳 过 程 称 为 遍历 的 , 若 对 任何 一 个 移 位 不 变 集 合 4, Pr{(Xo, X1,…) e 4} 或 
者 是 0, 或 者 是 1. 
定理 5.5 设 {Xn} 是 遍历 平稳 过 程 , 并 具有 有 限 均值 m, 则 以 概率 1 


lim =(X1 + + Xn) =m. 
证 明 ”对 每 个 实数 a, 定义 
A= {2= (zozb ji lm nl(z1 + .+ zn) < a} 
则 4 是 移 位 不 变 的 . 由 此 推 得 对 每 个 常数 a 


Pr{(Xo, 有 1 ) € A} 
= Pr{limn™ (Xi+.…++ Xn) < a} 
二 Pr{X<a}=0 或 1 


因此 X 一 定 是 常数 随机 变量 . 由 (5.16) 知 , 此 常数 只 能 是 mm. 
当然 , 我 们 希望 有 一 些 等 价 的 上 且 更 易于 理解 的 遍历 性 条 件 . 但 在 这 里 我 们 不 能 
话 述 . 我 们 下 面 不 加 证 明 地 列 出 一 些 结果 . 
定理 5.6 设 {X,} 是 平稳 过 程 , 下 面条 件 是 等 价 的 
(a) {Xn} 是 过 历 的 ; 
(b) 对 于 每 一 个 移 位 不 变 集合 4， 


Pr{(Xo, Xi,.…)€E A}=0 或 二 
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(c) 对 于 由 实数 列 (zo, zl …) 组 成 的 每 个 集合 4 
487 im, YC JE A} = Pr{(Xo, X1,.…) € A}; 
(d) 对 于 每 个 大 = 1 2,… 和 由 实数 向 量 (zo, xz1,…, zk) 组 成 的 任 一 集合 4， 
Jim 3 D0 HE A} = Pr{(Xo,..., Xr) € A}; 
(e) 对 每 个 和 每 个 +1 变量 的 函数 ， 


,le 
dm 2 G(X, Ktt) = EIO(Xo,..., Xn)], 
?一 工 


倘若 上 面 期 望 存在 ; 
(f) 对 于 实数 列 (zo, zi，……) 的 任 一 函数 由 


1 nn 
Jim — D2, $(Xi, Xst1,*) = EIp(Xo, X1,.…)], 
j=1 


倘若 上 面 期 望 存在 . 
在 这 些 条 件 中 , 极限 的 存在 是 强 遍 历 定 理 的 一 个 推论 . 例如 , 如 果 必 是 上 +1 个 


Yn = 由 Xp) n = 0,1,.…, 


确定 一 个 平稳 过 程 , 对 它 应 用 强人 遍历 定理 , 推 得 lim n-! 》,Y; 存在 . 由 定理 5.6 的 
2 


= 二 1 
(e) 知 这 个 极限 是 一 常数 . 
附注 5.3 ” 当 {Xn} 是 遍历 平稳 的 , 由 定理 5.6 的 等 价 条 件 , 显然 可 得 , 对 实 序 
列 的 任何 函数 $, 序列 
Yh = (Xn, Xn+1,.*), Nn = 1,2,.…: 


也 构成 一 个 遍历 平稳 过 程 . 


一 个 平稳 过 程 {Xn} 称 为 混合 的 (或 强 混合 的 ), 如 果 对 实数 列 的 任意 集合 4 和 
已 
Jim Pr{(X1,X2, ”" "| EA 日 (Xn+1, Xnt2, ” ‘) 和 B} 


=Pr{(Xi, Xp) € A}Pr{(X1, X2,.……) € B}. 
混合 是 一 种 渐 近 独立 的 形式 , 因此 每 个 混合 过 程 应 该 是 超 历 的 . 我 们 下 面 来 验证 这 
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个 命题 . 设 4=B 是 一 个 移 位 不 变 集合 , 则 (Xn, X41,…)EB 当 且 仅 当 (Xi1, X2.…)€ 
B. 应 用 混合 的 性 质 得 到 
Pr{(Xi, X2,...) € A} 
= Pr{(X1, Xa,.…) € A, (Xn, Xn+1,..*) € A} 
[Pr{(Xi, Xz) EA?， 当 no0 
这 只 有 当 Pr{(X1, X2,…) e 4} =0 或 1 才 有 可 能 , 所 以 过 程 是 遍历 的 . 还 存在 着 别 
的 关于 混合 的 等 价 条 件 . 例如 , 对 于 任意 上 = 1,2,.… 和 大 维 空间 中 的 集合 4,B， 
lim Pr{(X1,..., Xk) EA HH (Xnti...x,r) EB} 
= Pr{(X1,..., Xk) € A}Pr{(X1,..., Xk) € BY}. 
最 后 我 们 必须 指出 以 上 我 们 所 叙述 的 还 不 能 看 作 就 是 遍历 理论 , 实际 上 仅 是 遍 


历 理论 对 平稳 随机 过 程 的 一 些 应 用 . 遍历 理论 的 现代 观点 是 相当 一 般 的 . 令 卫 是 由 
可 定义 某 种 积分 概念 / f 的 函数 f 构成 的 抽 篆 空间 , 而 工 是 把 工 中 函数 f 映射 于 


L 中 函数 Tf 的 算 子 . 遍历 理论 是 研究 算 子 的 委 算 子 T" 的 有 关 极 限 性 质 , 其 中 
算 子 工 满足 : 

(i) 如果 了 是非 负 函数 , 则 Tf 也 是 非 负 函数 ; 

加 [ris fi 

在 平稳 过 程 {Xn} 的 情况 下 , 工 是 由 所 有 满足 ElIp(Xo, Xi,…- 川 < oo 的 函 
数 F({Xnj) = 6(Xo, XX，,…) 构成 的 ,积分 的 概念 是 期 望 / f({Xn)) = ElG(Xo, 
Xi 小 而 工 是 如 下 定义 的 移 位 算 子 : 


To( Xo, 及 1)， 及 2， "" ) 一 p(X1, 及 2 “" :). 


9.6 ” 允 访 理论 的 应 用 


在 上 一 市 开始 时 我 们 就 已 指出 超 历 定理 表明 时 间 平 均 X。 = ni(Xo 十 … 十 
Xn-1) 可 作为 对 应 过 程 期 望 m = E[Xol 的 估计 . 关于 遍历 定理 还 有 大 量 其 他 的 应 
用 . 我 们 下 面 仅 列举 三 个 例子 . 
A. 随机 环境 的 分 支 过 程 
分 文 过 程 我 们 已 在 第 2 章 例 F 中 介绍 过 , 并 在 第 8 章 作 了 比较 详细 的 讨论 , 该 
过 程 最 重要 的 特点 是 个 体 后 代 分 布 关 于 时 间 是 不 变 的 . 但 在 许多 情况 下 , 后 代 的 分 
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布依 赖 于 环境 的 改变 . 作为 这 一 领域 最 近 工 作 的 一 个 介绍 , 我 们 来 讨论 当 环境 依照 
平稳 遍历 过 程 随机 变化 时 的 绝 灭 问题 . 
我 们 假定 一 个 平稳 遍历 过 程 4 = {bx}%o， 称 为 环境 过 程 每 个 cn 值 对 应 于 一 
个 后 代 分 布 Fen 一 {pn (je20. 显然 ， Prn 人 之 0 且 >》 pn 人 = ] 则 {pe, }%2o 也 是 一 
i=—0 
个 平稳 过 历 过 程 , 显然 它 的 值 是 离散 概率 分 布 . 
设 Zn(= 2Z(n)) 表示 在 第 n 代 存 在 的 个 体 数 , 并 取 2o = 1. 在 所 规定 的 环境 


6 = {Cn} 下 , 我 们 假设 {Zn} 除了 第 n 代 后 代 分 布 是 pen 外 , 其 余 都 按 普 通 分 支 过 
程 演变 . 准确 地 说 , 我 们 假设 


ElsZ(n+)|co, ,Cn 20,. ,Zn| = (Be, (3)]20%), 
n=0,1,2,...,|s|<1, 
其 中 
pe (8) = 》 pn(j)s’ 
=0 
是 对 应 于 pc 的 概率 母 函 数 . 换 句 话说 , 在 过 去 的 环境 和 群体 总 量 条 件 下 , Z(n + 1) 


是 Z(n) 窜 (或 胎 ) 后 代 的 总 和 , 其 中 每 窒 的 数目 是 独立 同 分 布 随机 变量 , 其 共同 分 
布 是 pe,. 


设 Bn 是 事件 Zn = 0. 显然 BU B 表示 最 终 绝 灭 事件 . 引进 记号 


q(C) = Pr{ BIC} 
和 
gq = Pr{B} = Elg(O)). 
在 环境 过 程 〈 的 条 件 下 , {Zn} 像 一 个 普通 的 分 支 过 程 , 只 不 过 是 非 时 间 齐 次 的 , 利 
用 第 8 章 的 技巧 容易 导出 公式 
Els? "+d|0) = [Geo pe, (* (be, (3))-…)]. 
为 简洁 起 见 , 当 不 会 发 生 混淆 时 , 我 们 经 常 把 gci 记 为 $i. 显然 
4(5) = Jim po(p3(:… (bn(0)).…)) 
= $col lim $ig2(… (Gn (0)))::)) 
或 
q(C) = $eo laq(TO)), (6.1) 
1. 我 们 始终 假设 对 任何 Z, 与 其 相关 联 的 pec, (s) 却 不 是 一 个 常数 函数 . 
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其 中 TC 表示 移 位 了 的 环境 序列 {G1, C2，,…}. 此 重要 的 函数 方程 9(6) = $eo [q(T6) 
是 随机 的 , 类 似 于 第 8 章 的 方程 s = $(s). 
考虑 事件 {gq(C) = 1}. 也 就 是 说 , 当 随 机 环境 导致 群体 必然 灭绝 时 此 事件 发 生 . 
我 们 在 基本 方程 gd(C) = ge [a[TA| 中 利用 概率 母 函 数 bc 的 性 质 推 得 只 要 q(@ = 1 
就 有 4q(T5) = 1. 即 , 事件 {q(C) = 1} 是 移 位 不 变 的 . 依 假设 , 环境 过 程 《 = {Gn} 是 
调 历 的 , 所 以 我 们 有 
Pr{gq(C)=1}=0 或 1. (6.2) 


令 mc, = 2 ) 是 在 给 定 环境 下 第 n 代 后 代 分 布 的 条 件 均值 . {mc,,} 仍然 
是 一 个 平稳 遍历 过 程 ,并且 阁 


Ellnmel] < %, (6.3) 
强 遍 历 定理 告诉 我 们 | 
lm nm》 lnmes = 五 nmco] 
现在 我 们 假定 (6.3), 并 附加 条 件 
Pr{g(¢) <1}=1, (6.4) 
看 看 究竟 能 得 到 什么 结论 . 由 于 概率 母 函数 是 递增 的 且 是 凸 的 , 所 以 
ma 一同 (D > 一 四 对 于 任意 se [0,1) (6.5) 


依照 (6.4), q(6) < 1, 再 由 基本 函数 方程 a(C) = peco[q(TO)], 与 (6.4) 等 价 我 们 可 约定 
q(TC) < 1( 见 前 页 脚注 ). 由 (6. 和 (6.1) 我 们 得 到 


一 全 lg(TO)] _ 1~— gq(6) 
-qT¢6) 1-4a(TC) 


mco 之 


由 平稳 性 质 可 以 把 上 式 推 广 为 


ry, > -00 
1- ga(T"+10) 


其 中 了 "5 是 序列 (Cn, Cn+1,…). 由 此 有 


1 1 「 1- q(T*O) 
Thame, > pa (二 


一 =[nll — g(0)) — In(1 ~ q(T"O)) 
> ~ In[1 ~ gq(6)]. 


492 


444 第 9 章 平稳 过 程 


如 果 Elinme|] < co, 正如 我 们 所 假设 的 , 则 由 强 遍 历 定理 , 左边 收敛 于 Elin mc] 
而 右边 为 0 因此 
Elnme,| > 0. 


下 面 证 明 情 况 Blin me,] = 0 不 可 能 出 现 . 为 减少 证 明 的 难度 , 我 们 假设 
E{|Inll ~ g(6)] ~ Inl1 ~ g(TO))|} < oo. 


于 是 
Y, = lnfl ~ g(T"C)] ~ In[1 ~ g(T"+10)) 


构成 一 个 遍历 平稳 过 程 , 对 这 个 过 程 应 用 遍历 定理 , 有 
-gC) |] 1 1 1 — g(T™O) 
” oi 1 一 | on Th ( 一 
= lim -fnll-eG@j-mll-aavol (6) 
之 0. 


由 (6.5) 我 们 知道 


如 果 我 们 假设 0 = Elinmcs] = Blin pl! 则 不 等 式 
— Ooo [q(TO)] 
< -Bl 人 1 — g(T) | 
成 立 . 与 (6.6) 比较 , 我 们 推 得 


mn 1— bco la(TO)] 
” | | 1 一 4(T9) } | 
因此 唯一 值 是 g(T6) = 1, 这 与 规定 Pr{a(6) < 1} = 工 相 违背 , 由 此 ElInmc] > 0 一 
定 成 立 . 

综 上 所 述 , 如 果 Elinme,] < oo, 则 Pr{g(C) < 1} = 1 萤 涵 着 ElInme] > 0. 相 
反 , 由 ElInmeo] 和 0 可 得 Pr{gq(6) = 1} = 1.[ 利 用 (6.2)] 
B. 随机 游 动 的 幅度 

设 Xi, X2…… 是 独立 同 分 布 随机 变量 , 其 可 能 值 是 整数 0, 土 1, 土 2,…. 考虑 部 


分 和 过 程 9 = Xi 十 … 十 Xn,n 之 1, 及 So=0. 定义 在 前 个 和 中 的 幅度 ,为 
{5S1,…,Sn} 中 不 同 数值 的 个 数 . 我 们 有 如 下 表达 式 


Rs = 1 
天 一 | 
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1 如 果 Sj; 关 Sk， 对 于 j = 1,:…,k 一 1 
0， 其余 . 


现在 


已 [下 | = Pr{Sk — Sk_1 #0,Sk— Sk_2 #0,., Sk — S1 #0} 
= Pr{X% #0, Xk Xk A 0, Xk 二 .+ Xo 0} 
= Pr{S1 天 0,92 #0,..., Ok1 x 0} 


(因为 X 是 独立 同 分 布 的 ). 我 们 得 到 
lim Bl] =Pr{Sn 关 0 对 于 所 有 的 n>1}. (6.7) 


注意 到 {5, 关 0 对 于 所 有 的 n > 1} 是 过 程 {5%} 未 回 到 原点 50 = 0 的 事件 . 但 每 
个 收敛 序列 又 在 Cesaro 平均 意义 下 收敛 . 由 (6.7) 有 


im - [Rn] = lim 一 地 


(6.8) 
=Pr{S, Z 0 对 于 所 有 的 n> 1}. 
吉 把 上 面 左 边 的 期 望 去 挥 , 极限 式 子 仍然 成 立 , 即 以 概率 1 成 立 
im = = Pr{S， 关 0 对 于 所 有 的 n> 1} (6.9) 


我 们 下 面 通过 验证 与 其 等 价 的 两 个 关于 上 、 下 极限 的 不 等 式 来 证 明 这 个 事实 . 首先 
用 m 表示 任意 正 整数 , 并 令 Zk 是 从 (k 一 1)m 十 1 至 km 期 间 和 序列 {5i;} 经 过 的 
不 同 点 的 数目 , 等 价 地 说 ,Zi 是 在 集合 {SG(-_1m+i,… ,Skm} 中 的 幅度 . 注意 到 和 
仅 依赖 于 下 标 ni 介 于 (k 一 1)m+1 和 km 之 间 的 Xn, 所 以 Zi 是 秘 此 独立 的 随机 
变量 , | 条 | < m, 显然 Zk 也 是 同 分 布 的 . 验证 不 等 式 Rem < 21 十 … 十 Zk 并 应 用 大 
数 定 理 得 到 


lim sup Te < limsup ~ _ ElZ1] 


lim sup = R, 
全 一 co 光 
(n/m] + Dm 下 mym+Dm 
< msup n (n/ml| + 1)m 


~ 22 
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上 式 对 任何 m 成 立 . 但 1 = Rm, 故 由 (6.8) 有 


ElR"] 


= Pr{Sn 关 0 对 于 所 有 的 n> 141}. (6.10) 


相反 不 等 式 的 证 明 比 较 困难 , 我 们 需要 强 遍 历 定理 . 
定义 


] . 
lim sup ~— Rn, < lim sup 
n—o0 1 1 


yy, -| 1， 如果 5; 关 Sk， 对 于 所 有 的 j > 
0， ”其 他 . 

即 如 果 SS; 是 时 间 k 之 后 永远 不 会 再 到 达 的 状态 则 Vi 为 1， 否则 为 0， 并 且 

六 十 … 十 WV 是 至 时 刻 n 为止 所 到 达 而 以 后 永远 不 再 到 达 的 状态 的 数目 ， 由 于 

Rs 是 在 1 至 n 时 刻 所 到 达 的 而 在 时 刻 n+ 1 之 前 没有 重复 到 达 过 的 状态 数目 . 显 

然 > Vi 十 … 十 WV. 由 于 {Xk} 是 平稳 遍历 过 程 ( 见 问题 21) 并 且 由 附注 5.3， 

{VW} 也 是 , 因为 


Vi 1, 如 时 让 k++1 0, Xk+1 十 ki2 天 0,…: 
0， ”其 他 
一 p(Xk+1, 从 天 十 2， 小 


其 中 
bzlza 小 二 | 1， 如 果 Zz1 关 0,7z1 二 x2 关 0,7z1 十 Xo 十 XT3 天 0,… 
0， ”其 他 . 
由 站 历 定理 推 得 
minf 吉 > mint tn lvl. (6.11) 
当然 ， 


EIVi] = Pr{Sk 类 0， 对 所 有 大 > ] 
结合 (6.10) 和 (6.11), (6.9) 得 到 证 明 . 
. 炳 
概率 是 对 单一 事件 的 发 生 不 确定 性 的 度量 . 粹 是 对 事件 集合 不 确定 性 的 度量 . 


设 是 以 概率 p; 取 值 i(i = 1,2,…,n) 的 随机 变量 . X 的 炉 (或 事件 {X 三 吴宇 = 
1,…,n 的 炉 ) 则 按 下 式 计算 


OO 


H(X)= — pilnp; (6.12) 


一] 
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(我 们 规定 0.1n0 = 0). 读者 可 以 验证 此 定义 具有 如 下 三 个 性 质 ， (i) 常数 随机 变量 
的 炉 是 0; (ii 如 果 我 们 对 随机 变量 附加 上 以 概率 pi+l = 0 取 值 i+ 1, 其 燃 是 不 变 
的 ; (证 ) 当 pi = … = pn = 1/n 时 , 和 烂 取 最 大 值 nn. 最 后 这 一 性 质 与 我 们 关于 不 确 
性 的 直观 是 一 致 的 . 例如 随机 变量 
yx _」1 ， 以 概率 0.999， 
-10 ”以 概率 0.001, 
比 随机 变量 , 
了 ) 
0， ”以 概率 


» 


| 以 概率 
太 一 


要 肯定 得 多 , 或 易于 预测 得 多 . 
我 们 可 以 把 上 述 定义 推广 到 两 个 随机 变量 的 情况 , 其 中 Pr{X = i,Y = j} = pi 
这 时 和 燃 的 公式 是 
H(X,Y) ops jn Di 
在 已 知 Y 条 件 下 定义 并 的 条 件 焕 为 


H(XIY) = -PY = ) plilj) np 让 9) 


其 中 p(il7) = Pr{X =iY = 站). 利用 等 式 p(i]jj) = pijy/Pr{Y = 分 得 到 
H(XIY) = — 2_pi Inlpis/Pr{Y = 
~ H(X,Y) HY). (6.13) 


由 此 得 到 重要 关系 式 
H(X,Y) > H(Y). (6.14) 


换 句 话说 , 两 个 随机 变量 的 不 确定 性 超过 其 中 任何 一 个 随机 变量 的 不 确定 性 . 

证 明 在 已 知 Y 的 条 件 之 下 X 的 不 确定 性 不 超过 无 条 件 下 X 的 不 确定 性 有 点 
困难 . 令 g; = Pr{Y = 从 .注意 到 函数 工夫 = -tnt 当 上 > 0 时 是 止 的, 利用 Jensen 
不 等 式 ( 见 6.2 节 , 凸 性 的 广义 定义 ) 得 到 


AH(XIY) = 5 5 wrip(il) 


< > Tr 5 oo 


= H(X). (6.15) 
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由 此 式 和 (6.13) 得 到 
H(X,Y) < H(X) + H(Y). (6.16) 
下 面 我 们 继续 推广 箭 的 定义 . 如 果 XX1,… ,Xm 是 具有 联合 分 布 的 随机 变量 族 ， 
并 且 Pr{ Xi = i,… ,Xm 二 im} = pi) 置 


末 (C Xm) =- pli im)lnp(i,., im) 


我 们 有 类 似 于 (6.13) 和 (6.15) 的 绪 采 ， 


再 (CO Xm) = HCXI) + H(X2o|XI) + H(Xa|X, Xo)+: .+H(Xm|X1, ,Xm-1). 
(6.17) 
和 


再 (从 R| 有 1 和 天 < H(Xk|X2,:.*, Xk-1). (6.18) 


现在 今 {Xn} 是 平稳 过 程 ， 其 中 每 个 Xk 的 可 能 值 是 l, 人 由 (6.18) 及 平稳 
性 推 得 


H(Xk-1|X1, 站 的 ,2) ~ H(Xk|X2, “° ,kl1) 
> H(Xk|X1,..., Xk-1). 


由 于 序列 是 单调 递减 和 非 负 的 , 我 们 可 以 定义 过 程 {X。} 的 炳 为 
H({Xn)) = lim HOXKIX1,, Ke) (6.19) 


男 一 方面 ， 依照 (6.17), (1 /DH(X), “+e , X!) 是 H(X.IX), * ) 和 大 1 的 Cesaro 平均 ， 
因此 我 们 有 


H({Xn}) = lim 7H(X1,., Xi), 


出 乎 意外 的 结果 , 即 以 概率 1 


， ] 
lim mp(Xo Xn) = H({Xn}). (6.20) 
ni—00 7 


(6.20) 的 右边 是 一 常数 , 可 按照 式 (6.19) 计算 得 到 . 其 左边 部 分 是 依 随机 序列 {Xn} 
的 极限 . 这 个 结果 告诉 我 们 , 对 比较 大 的 n, 观察 序列 Xi X2，…… 的 概率 p(X1,…， 
Xn) 接近 于 exp(-mE({Xn)) 且 以 此 为 界 . 

我 们 先 来 验证 当 {Xn} 是 平稳 遍历 有 限 马 尔 可 夫 链 时 ，(6.20) 成 立 , 然后 再 来 叙 
述 并 证 明 一 般 的 结果 . 
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令 P=|P(i, 站 | 各 -1 为 不 可 约 有 限 状 态 马尔 可 夫 链 {Xn} 的 转移 矩阵 . 我 们 假 
设 Pr{Xo = 让 = (人 其 中 {x(i)}? 是 对 应 于 了 的 平稳 分 布 . 计算 
H(Xn,|Xo,:::, Xn-1) 
一 —Y rr(io)P(ioia) Pin-2in-1) > Pin-lin) ln P(in-1, in) 


(利用 过 程 的 马尔 可 夫 链 的 特性 和 x(i) 是 平稳 分 布 ) 


=— > _7(i)P(i,j) In P(i,)), 
所 以 
H({Xn}) = — 2 7)PG, 7) In Pl,). ll 
?7 
而 另 一 方面 ， 
二 ImPUXo 大 1 
Hf 
一 一 = In{n(Xo)P(Xo, XD) PCXn -2 Xe 
] nn 一 2 jy 1 | (x 
一 六 2 i 一 六 开元 全 D0 
其 中 


Wi = — ln P(Xi, Xit1). 
一 个 不 可 约 有 限 状 态 马 尔 可 夫 链 车 其 初始 状态 服从 平稳 分 布 则 生成 一 个 跟 历 平稳 
过 程 . 由 于 仅 有 有 限 个 状态 , 因此 Wi; 是 有 界 的 . 应 用 沉 历 定理 得 到 


1 
lim -3 In P(X0,:……, zx 
全- 一 CC 7 


] n—2 
-a 中 Dw 


k= 二 0 
= El[Wo] = — > 7(i)P(i,j) ln P(i,)) 
bj 
~ H({X,}), 


此 即 所 要 证 明 的 . 下 面 是 一 般 情 形 . 
定理 6.1 设 {Xn} 是 具有 有 限 状态 空间 {1,…,N} 的 遍历 平稳 过 程 . 令 
D1, , im) 一 Pr{X] 一 11 = im} 和 


H({Xn}) = lim -这 2, pe ape . 


k=1 21 
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则 以 概率 1， 


的 有 限 维 分 布 族 一 致 . 即 令 


lim 号 in p(X1,... Zn = H({Xn,}). 


Pr{X,, = Lm ) 太 m 二 k 一 im 十 大 一 Pr{fXi 一 Lm 0 ,Xt 一 imtk}， 
对 任何 m=…, 一 1,0, 十 1.… 和 = 1,2,…. 
置 
fr(%; 1, ~ ,Lk) 一 Pr{ Xk 一 i|Xo 一 Vk， ) 从 大 1 一 i1} 
一 Pr{ Xo 一 iX_k 一 ~ Vk, 4 ,及 _] 一 21} 
(由 平稳 性 ). 由 反 向 鞍 收 敛 定 理 知 存在 极限 
f (i;21,i2,.…) = dim 大 (全 三 外) 
一 Pr{Xo 一 i|X_1 一 1 ， 及 2 一 ?2 ， *。 } 
一 Pr{Xn 一 让 Xn -1 一 绊 ,和 nn-2 一 22)， }. 


置 
90(i) = — ln Pr{Xo = }, 
gk (io, i1 “7 , Lk) 一 一 jn fi(i0;21, , Lk) 
一 一 In Pr{Xo 一 iolX_xk 一 Vk, "* ,A_l 一 1 
Pr{X = i Xi = ,Xo = io} 
= 一 上 一 一 
Pr{X_x 一 ZK 入 _] = i1} 
和 
gb iyia,) = — In f(t1,ia,.…). 
直接 计算 得 到 等 式 
1 1 n—} 
-~ Iinp( Xo,.…, Xn-1) = 一 OCX 0). 


如 有 果 我 们 能 够 用 g(Xk, Xk_1,…) 代替 gk( XXXo) 则 上 式 右边 部 分 是 典型 的 平 
均 , 可 应 用 沉 历 定理 , 因为 当 {X} 是 平稳 过 程 时 , Wi = g(Xk, Xs_1,…) 也 是 平稳 
过 程 . 在 马尔 可 夫 过 程 情 况 下 , 此 代替 是 显然 的 , 因为 由 马尔 可 夫 性 , 对 任意 《> 1 
都 有 gk(Xk,:…:, Xo) = g(Xk, X11, )， 
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在 当前 情况 下 , 我 们 首先 需要 证 明 


已 upgn (Xn, Xo)| < 00. (6.21) 
nn 之 1 
固定 和 > 0 并 分 解 如 下 事件 


{se gn(Xn, 3 入 0) > | 


nn 之 1 


= | j{gr(Xk,…, Xo) < A 对 于 k=1,.,n-l, 且 gn(Xn,..…, Xo0) > A 


二] 


_ Dose 


五 一 [0 各) gt ,i0) A 对 于 k=1,...,n—l 且 gn(in,... ,10) > 入}. 
我 们 已 根据 gn,(Xn,…, Xo) > 入 成 立 的 首次 时 间 nn 分解 了 上 面 左 边 的 事件 . 由 于 这 
些 事件 是 不 相交 的 , 所 以 有 


Pr {sup on Ce “… ,Xo0) > | 
nh 之 1 


= Spr{(Xo, Xn) € En}. 
n=1 
下 面 我 们 通过 规定 最 后 状态 进一步 分 解 事件 . 令 
EN 一 {(io, | ,in—1); (io, “bnl) 2) 三 En }. 
现在 考虑 
pr{(Xo,..., Xn) € En} 
= 》 Pr{f(Xo,.…, Xn-i)E EW 上 且 X=). (6.22) 


由 条 件 概率 的 定义 , 我 们 有 


Pr{Xn=i 且 (Xo,.., Xn-1) € EW) 


一 Pr{tXn 一 让 0 一 20， ”” ;人 nl 一 in—1} 
(i0 in 1) EBS) 
.Pr{ Xo = io0,, Xn = in_1}. (6.23) 
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由 于 过 程 是 平稳 的 , 我 们 有 
Pr{X = iXo = io,.…, Xnl = in_1)} 
= Pr{Xo=iX_ n= io ,XL1 = ni) 
= exp[—gn(i,in-1,..* ,io)]. 


显然 只 要 (io, “" ,in—1) 属于 EN), gn (i, tn—1) “"" , 30 ) 一 定 起 过 入 . 这 样 ， (6.23) 中 概率 
的 界 为 


Pr{ Xn 一 ? 和 (Xo, “"") Xn-1) 三 El?} 


< > e “Pr{Xo,= io,.…, Xn-1 = in_1} 
(ioy in_1)EE) 
< e“^Pr{(Xo, ”3 nn_1) 二 EW}. 


对 每 个 固定 i, 集合 E(", EM ,… 不 相交 , 其 理由 与 Bi, 2,… 不 相交 是 相同 的 , 把 
等 式 (6.22) 关于 n 求 和 并 利用 所 求 的 界 , 有 


>», Pr{(Xo, 四 ,人 Xn) Ct En} 
n=1 


= 》 》 Pr{(Xo,.…, Xn-1) € EO 和 Xn, = 


i 他 一 1 


<e b> Pr{(Xo,:.., Xn_1) € sp 
<e™ ~ 1 ~ 
< Ne 

其 中 N 是 过 程 不 同 状 态 (i 值 ) 的 数目 . 这 样 我 们 证 明了 


Pr {supgn (Xx, “… ,Xo0)> | < Ne 一 . 
人 之 ] 


由 此 估计 式 易 证 得 关系 式 (6.21). 
因为 以 概率 1， 
9K( 大 0， 1 及 一 g(Xo, 入 1， “ 小 (k 一 一 00) 
并 且 左 边 函 数 族 是 一 致 可 积 的 , 我 们 可 以 交换 期 望 和 极限 号 得 到 


Elg(X'o, 入 _1， ~ :| 一 dim Elgk(Xo, 全 引 


| 


sm Fy a 
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= lim 二 | 
k=0 
= H({Xx.}). 


第 二 个 等 号 是 由 于 平稳 性 . 
注意 ， 


1 他 一 上 
~ 2 gk(Xk, 及 
k= 


nl 
] 
一 ~ 2, I9(Xk, XRD ) 十 一 1 SoCXe 0 一 9 让 (6.24) 


大 一 0 0 
我 们 已 证 明了 Elg(Xx, Xk-1,…)] < oo, 再 由 遍历 定理 推 得 
] nC—1 
Lim 2 IX 和 1 
= Elg(Xo, X-1,.…)| = H({Xn}). (6.25) 
站 
PN To,T-1,°*) = sup lgr (zo, ,Tk) 一 g(To, tT-1) …-))， 
kK>N 

和 


Ze = ON (Xk, Xk 1 
显然 , {ZF} 是 平稳 遍历 的 且 EI|2Z 六 | < eco. 因此 


lim sup |= } To (Xk,.*… ,Xo) 一 sXe 
< lim sup — 1 gk (Xk, ,Xo) -se 
NOO We 


< lim sup — 二 于 = 五 |2】 |]. 


NO0 


但 当 六 一 co 时 , 2 一 0, 并 且 可 以 验证 极限 号 与 期 望 可 交换 , 从 而 成 立 jim 五 [下 ] = 
0. 由 此 推 得 式 (6.24) 右边 第 二 项 当 n 一 co 时 趋 于 0. 结合 式 (6.25), 我 们 有 


n—l 
.1 
‘Jim 六 2 gk(Xk, “ , 从 0j 一 H({Xn}), 


这 就 是 要 证 明 的 . 


501 


502 


454 第 9 章 平稳 过 程 


9.7 协 方 差 平 稳 过 程 的 谱 分 析 


在 本 节 将 研究 对 于 零 均值 协 方差 平稳 过 程 使 用 调和 函数 的 典型 表示 式 . 前 后 
我 们 曾 猜 想 任 意 这 样 一 个 过 程 可 表达 为 形 如 9.1 节 例 B 过 程序 列 


X, = SA cos nwex + Bk sin nwx} (7.1) 
k=0 
的 平均 平方 极限 , 其 中 0 < wk < no, 系数 {44x} 和 {Bk} 互 不 相关 且 具 有 和 零 均 值 和 方 
差 of = E[A4] = E[B#]. 在 9.1 节 中 ,我们 计算 了 (7.1) 的 协 方差 函数 是 


R(u)=0°* Sp COS WWEk, (7.2) 
k==0 
其 中 , o? = cg 十 … 十 am 且 pn = ok/o0. 为 了 方便 , 我 们 假设 wo = 0 并 把 (7.2) 写 
为 对 称 形式 
R(u)= 0 2， Gk COS UN， 
k= 一 ?nn 
其 中 , go = po, 且 对 于 有 = 1,:…,m, gk = ph = qk;w-k 三 一 wk. 如 9.1 节 中 所 


R(u)=0o’ 人 cos uwdF (w) (7.3) 


其 中 下 是 可 能 值 在 [-x,7z] 上 的 对 称 随 机 变量 的 分 布 函数 . 在 本 节 我 们 将 证 明 每 个 
协 方差 函数 可 以 写 为 (7.3) 的 形式 , 其 中 F(w) 是 某 个 唯一 确定 的 概率 分 布 函数 . 我 
们 把 与 协 方差 沙 数 这 样 相 联 系 的 函数 称 为 过 程 的 谱 分 布 函数 . 

一 般 来 说 , 从 (7.3) 出 发 可 以 进一步 得 到 过 程 {X} 的 典型 表示 式 . 为 粗略 描述 
这 个 想法 , 假设 {200(w),0 < w < zw} 和 {29(w),0 < w < zt} 是 两 个 彼此 不 相关 的 
随机 过 程 , 并 且 各 自在 不 相 重 磊 区 间 上 的 增 量 也 不 相关 . 进一步 假设 2 中 (0) = 0 及 
过 程 2 具有 共同 的 方差 函数 


El[Z(w))] = o?[F(w) ~ F(-w) 
=20°[F(w)—F(0)], Ogwgn 


为 说 明 方便 , 在 这 个 概略 的 介绍 中 , 我 们 还 假设 F(w) 是 连续 的 . 
令 0= wo <w <… < wm < wm+tl = 是 给 定 的 , 置 AZi = GO(wkHi) 一 
ZW(wx), 由 于 在 不 相 重 迭 区 间 上 增 量 是 不 相关 的 , 并 且 协 方差 函数 是 已 我 们 有 


EIAZWAZY)]=0 如 果 i 关 7 或 31 
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且 
BIAZ)? =2{F(wet1) — F(wk)} = 2AF,. 


让 4k = AZ 和 Bi =AZC ,等 式 (7.1) 变 为 


nn + 
>》 COS mk AZ 十 >》 sin nwkAZ) ， 
k=0 k=0 


它 是 黎 曼 - 斯 蒂 尔 切 斯 通 近 和 , 它 在 均 方 意义 下 收敛 于 如 下 积分 ， 
人 cos7TwdZAU(w) 十 [ sin nwd22)(w). 
0 0 


关于 高 斯 过 程 相应 情况 将 在 下 一 节 研 究 . 
协 方差 函数 的 谱 表 示 


设 {Xn;n = 0, 土 1, 土 2,…} 是 具有 等 均值 和 已 知 协 方差 函数 的 协 方差 平稳 过 程 
者 需要 , 可 乘 以 一 常数 , 我 们 不 妨 假设 过 程 的 常数 方差 是 1. 这 样 , 我 们 所 研究 的 协 
方差 平稳 过 程 {X%}, 其 协 方差 函数 


R(u) = El[XnXn4u], U=0,+t],+2,:…, 


满足 R(0) = 1. 
在 叙述 第 一 个 定理 之 前 , 我 们 给 出 两 个 简短 定义 . 首先 , 一 个 实 值 函 数 R(w),w = 
U0, 土 1, 土 2,: ~ 称 为 半 正 定 的 ， 如 果 对 所 有 k= 1,2, “ 和 所 有 实数 CG1 *, Qk, 


k kk 
》 = QQ R(ti— I) 0. (7.4) 
i=1 7 一 1 
其 次 , 一 个 随机 变量 W, 或 它 的 分 布 函 数 已 称 为 对 称 的 ， 如 果 W 与 -W 具有 相同 
的 分 布 . 这 样 , 如 果 下 在 所 有 连续 点 w 上 满足 F(w) = 1 一 F(-~w) 则 是 对 称 的 . 
定理 7.1 设 给 定 R(w),wu = 0, 土 1, 土 2,…. 则 下 面 命 题 等 价 : 
(a) R(u) 是 具有 零 均值 和 方差 为 1 的 实 值 协 方差 平稳 过 程 的 协 方差 函数 ; 
(b) R(0) =1, 对 于 =0,1,…,R(w) = R(--wu) 并 且 R(w) 是 半 正 定 的 ; 
(c) 在 [可 上 存在 一 个 对 称 概率 分 布 函数 下 , 使 得 


R(u) = 人 COS uwdF (wj u 一 0,1,.…. (7.5) 


证 明 (a) 坊 (5). 假设 R(u) 是 具有 零 均值 和 方差 为 1 的 实 值 协 方差 平稳 过 程 
的 协 方差 国 数 ， 显然 ， R(O) 一 E[X| = 1, 并 且 尺 (u 一 ElX, Xnts| 一 ElXnruXn) 一 


| #9 
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RR( 一 4). 为 证 明 R(w) 是 半 正 定 的 , 令 a1,…,ax 是 任意 给 定 的 实数 , 计算 


pp 
Og<E ~ | 


QQ Ra 


| 
J 
Cy. 
| 
| 一 


| 


va 
Wy Me 1 
Ws 


QQ EXn iNXn+j 


二 二 
| 
| 
Cy 
| 
he 


ee 
Wh 


QiQ; R(i — 3). 


| 
jt 
Cy, 

上 
pd 


这 样 由 (a) 推 得 (b). 
(b) 坊 (a). 现在 假设 已 知 R(w) 具有 (b) 中 所 氢 述 的 性 质 , 并 置 


Ci7 三 R{i 一 7). 


则 对 任意 上 = 1,2,…, 矩阵 4 = |ai 尼 ;1 是 对 称 的 且 半 正定 的 . 根据 第 1 章 关 于 多 
元 正 态 分 布 的 说 明 , 任何 这 样 一 个 矩阵 对 应 于 一 个 具有 零 均值 且 协 方差 阵 为 A 的 
多 元 正 态 分 布 . 这 个 对 应 一 致 地 确定 任意 有 限 集合 (X41,… ,Xnyx) 的 分 布 , 从 而 
确定 了 过 程 {Xn;n = 0, 土 1,…} 的 分 布 . 显而易见 , 这 时 RR 就 是 该 过 程 的 协 方差 函 
数 . 这 样 , 对 于 具有 (b) 中 性 质 的 R, 至 少 存在 一 个 协 方差 平稳 过 程 , 以 R 为 其 协 方 
差 函 数 

(9=>(b). 我 们 假设 


R(u) = / | cosUwdE (wj = Elcos uw), 


其 中 W 是 具有 分 布 函数 下 的 对 称 随 机 变量 . 显然 有 R(0) = 1 和 R(w) = R( 一 .我 
们 仅 需 要 证 明 R(w) 是 半 正 定 的 . 利用 恒等式 cos(z 一 y) = coszcosy 二 sinzsiny 有 


SoA i—j) VS ao Bleos(i - Wi 


?一 1 7 一 1 i 二 1 7 二 1 


kK 大 
=E Daioy cos(iW 一 IW) 


4 一 上 73 一] 
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2 
| > 
这 样 便 由 (c) 推 得 (b). 
(b) 坊 (c). 设 呈 是 已 知 的 . 对 任意 给 定 的 n 和 w, 利用 性 质 (7.4), 令 aij = cos jw， 


k “ k 
Eb >》 oicosiW 十 >》 aisinif 
+ 二 ] 


t= 二 1 


得 
0 < »》 ,2_R(G — j) cos iw cos jw. 
?一 1 j=1 
类 似 地 , 令 ui = siniw, 得 
Lf 所 
0 < >》 ?RG — 7) sin iw sin 7w， 
i 二 1 7 一 1 


把 这 两 个 不 等 式 相 加 并 利用 三 角 恒等式 cos(z 一 y) = coszcosy+ sinzsiny 推 得 
0 < 2 DRG- 7) cos(t — 7)w 


t=1 7 一 1 
包 一 外 


= 》 -Reosuw 
1 


如 果 我 们 定义 
fn(w) = 1 (n—|u)R(u cosuw, -nw&n, 
Lf 二 1 
则 
fn(w) 之 0 
其 次 计算 


[fdas = 二 nh) ){ /eoswwaw) ao 
= 二 (nj(C2mR(O) =1. 
故 , 对 每 个 n, 是 [可 上 的 概率 密度 函数 . 由 f 的 定义 可 知 它 是 对 称 的 ， 
fa(w) = fa(-w) 
令 到 是 对 应 于 密度 函数 户 的 分 布 函数 , 利用 f 的 定义 , 计算 
| osuarato) = {coowfnlo)as 
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开 
/ COB8 Ww (去 ! 3 (n — |k|) cos pp dw 
一 nt1 
n—l 


> (1 一 下 元 {/ cosuw coskwaw | RK) 


此 二 一 nh 十 1 


~ (1) in 


1- ) a 


其 中 当 4 = 上 时 566k 为 1, 否则 为 0. 这 样 我 们 定义 了 一 个 分 布 函数 序列 后, 对 于 化 
们 , (7.5) 在 下 面 意 义 下 “近似 地 ”是 正确 的 ， 


(1-  ) Rw) = [eswwar to) 


由 Helly-Bray 引 理 (第 1 章 ) 知 , 存在 分 布 函数 和 子 序列 {F,}, 使 得 对 每 个 有 界 
连续 函数 h， 


im / Ruwjdzn (w) = / | hlw)}dF(w). 
与 h(w) = cos uw 时 得 到 


/ cosuwdF{(w) = lim / cos uwd Fn, (w) 
一 天 K-00 一 i 


= lim ( 一 必 R(u) 
类 一 co hk 


= R(w)， 对 于 w=0,+1,… 


这 就 完成 了 定理 的 证 明 . 国 
按照 等 式 (7.5), 协 方差 师 数 R(w) 易 由 谱 分 布 函 数 确定 . 事实 上 ， 


R(u) = 人 cos uwdF (w) 
表明 R(w) 是 分 布 函数 F(w) 的 健 里 叶 - 斯 蒂 尔 切 斯 余弦 变换 . 反之 , 一 般 地 , 谱 分 
布 函数 FF 可由 对 协 方差 函数 R(w) 计算 逆 余 弦 变 换 得 到 . 我 们 下 面 不 加 证 明 地 叙述 
当 下 (w) 可 微分 时 的 结果 . FF(w) 的 导数 


ot 


f(w) = 对 于 一 <w < 
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称 为 谱 密 度 函 数 . 在 这 种 情况 下 ， 
R(u) = 人 CoS Uw f (w )dw 


是 谱 密 度 范 数 f(w) 的 余弦 变换 . 
定理 7.2 设 F(w) 是 对 应 于 协 方差 函数 R(w) 的 谱 分 布 函数 , 如 果 
>》 ,|R| < eco， 
u=0 
则 FF(w) 可 微 且 其 导 函 数 为 
f(w) = FF (w), —X<w<. 
这 时 有 
f(w) = = {jo 十 》 COS cat 
u 二 1 
1 
= 元 2 R(u) cos uw 
I : 
= 3 2 e™ R(u) 
复 值 过 程 
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为 了 理论 和 应 用 上 需要 , 我 们 下 面 来 介绍 复 值 平稳 过 程 . 作为 实例 , 在 通讯 理论 
的 许多 领域 中 , 通常 把 一 个 交流 电信 号 的 瞬时 电压 和 电流 用 复数 来 表示 . 非常 幸运 ， 


这 时 我 们 可 用 很 目 然 的 方式 达到 预期 的 推广 . 
令 瑟 =Xi+iX 和 Y= Yi 十 iYz 是 复 值 随机 变量 , 我 们 定义 其 期 望 为 


mx = EIX|] = 五 人] + iE[X2], 


协 方差 定义 为 
covlX,Y| = El(X — mx)(Y — my)), 


其 中 [了 一 my 表示 了 -my 的 共 斩 复 数 
这 样 ,具有 零 均值 复 协 方差 平稳 过 程 {X} 的 协 方差 函数 是 复 值 函数 


R(u) = EI[Xn, Xni+u], d=0,+l, 士 2 
写实 值 情 况 相 同 , R(0) 是 实 的 , 并 且 


RO0)z|RW), v=0,+1,+2,.…. 
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但 对 称 性 现在 是 以 埃 尔 密 特 形式 出 现 : 
有 人 一 R{(—u), 


并 且 半 正定 性 是 指 对 于 任意 正 整 数 nn 及 任意 复数 Ql , Cn) 


人 Sa Ri -站 >0. 


7}=1 k=1 


下 面 定 理 是 定理 7.1 的 一 般 化 . 其 证 明 步 又 与 前 述 定理 完全 平行 , 这 里 从 了 略 . 
定理 7.3 ” 设 复 值 函数 R(w),w = 0, 土 1,…, 是 已 知 的 . 则 下 面 命 题 等 价 : 
(a) R(u) 是 具有 零 均 值 和 单位 方差 复 值 协 方差 平稳 过 程 的 协 方 复 函 数 
(b) R(0) = 1, 对 于 w= 0,1,…,R(w) = R(t), 并 且 R(w) 是 半 正 定 的 . 

(c) 在 [KT 上 存在 一 个 概率 分 布 函数 FF( 不 一 定 对 称 ), 使 得 


R{v) = / edF(w). 


9.8 高 斯 系统 


在 本 节 将 构造 一 个 具有 对 称 谱 分 布 函数 Fw)(-r 和 ws 和 nr) 的 实 值 高 斯 平稳 过 
程 {Xn}. 我 们 利用 下 面 公式 (记号 ZW(dw) 与 424(w) 意义 相同 . ) 


X, = / cosnwZ 1 (dw) + / sin nwZ2(2) (dw), (8.1) 
0 0 


其 中 {29(w);0 < w < Xz},i = 1,2, 是 高 斯 过 程 , 彼此 独立 , 且 具 有 独立 增 量 , 并 且 
E[({2Z0(w2) 一 Guo 人 = 2{F(w2) -Fo i=1,2,0<w wn 


一 般 来 说 , 对 于 每 个 协 方差 平稳 过 程 都 存在 形 如 (8.1) 的 表达 式 , 但 若 {Xn} 不 是 高 
斯 的 ,2 也 不 是 高 斯 的 . 下 面 我 们 仅 介绍 这 方面 一 些 简单 的 结果 . 


高 斯 系统 
设 了 是 一 个 抽象 集合 , 并 且 {X(t);t eT} 是 一 随机 过 程 . 我 们 称 {X(b)teT] 
是 高 斯 系统 或 高 斯 过 程 , 如 果 对 每 个 n= 1,2,… 和 了 的 每 个 有 限 子 集 {t1,…,t,})， 


随机 问 量 (站 二) 和 (加 )) 具有 多 元 正 态 分 布 . 等 价 地 , 我 们 可 要 求 对 每 个 ”和 每 
个 线性 组 合 


al 天 人) 十 :十 an 天 (如 )， Gi 为 实数 ， 
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都 具有 一 维 正 态 分 布 . 每 个 高 斯 系统 由 其 抱 值 和 协 方差 函数 唯一 确定 , 记 其 为 
AH = EIX(tW)], teT. 
和 
Tti,t2) = EX(t) — ppt)}HX(ta) — pto)H, teET, 
协 方差 函数 是 半 正 定 的 , 即 对 每 个 n=1,2,… ,实数 i,…,an 及 工 中 元 素 珀 , 妇 ,… 


tn, 


> aioT (ti,t;) > 0. (8.2) 


1,7 二 1 


为 验证 这 点 我 们 只 要 计算 》 ai{ 和 (6) - p(ti)} 的 方差 . 事实 上 ， 510 
t= 


| 位。 (X(&) -| 


= 》 aayB [X(t) 一 At {X(t)) 一 A() 


i,j=1 
Te 
二 》 oiosT (ti, ty). 
4 一 


反之 , 任意 给 定 均值 函数 Ab 和 半 正 定 协 方差 函数 Wt) 存在 对 应 的 高 斯 
系统 . 为 说 明 这 一 事实 , 只 要 注意 到 每 个 有 限 族 { 针 (),…, 关 (tn)},ti ET, 都 对 应 
于 一 个 具有 均值 向量 {p(ti),…, p(tn)} 和 协 方差 矩阵 rt le ET) 的 多 元 
正 态 分 布 . 这 就 确定 了 过 程 {X(t);t € T} 的 相 容 的 有 限 维 分 布 族 . 再 根据 1.4 节 即 
若 所 述 的 高 斯 系统 必 存 在 . 


高 斯 随机 测度 
设 忆 是 有 限 维 空间 的 一 个 子 集 , g(z) 是 定义 在 马上 非 负 函 数 , 并 满足 人 g(z)dz < 
oo. 对 互 的 每 个 子 集 4, 定义 
m(4) = | gle) 


我 们 断定 表达 式 
1(A,B)=m(ANB) 


定义 一 个 指标 参数 是 E 的 子 集 的 半 正 定 函数 . 几乎 和 前 面 完 全 相同 , 我 们 计算 


ogf 名 oilA, 中 9g(z)dz 
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= wo /mrau(ajelcjdz (833) 


1,I=1 


一 > oiam( A; 门 A;), 
i,j=1 
其 中 


I4(z) = 1， 如 果 ze4， 
“ 0， 如 果 z&4. 


一 个 具有 均值 为 0, 协 方差 为 T(4, B) = m(4nB), 4, B c EE 的 高 斯 系统 {2Z(4)， 
A Cc 可 称 为 由 mm 导出 的 高 斯 随机 测度 . 倘若 人 g(z)dz = oo, 我 们 仍然 可 定义 


Z(4), 但 不 对 互 的 所 有 子 集 , 而 仅 对 使 得 | g(z)dz < oo 的 那些 子 集 4 


假设 是 某 个 有 限 维 空间 , 并 对 所 有 z,9(z) = 1. 这 时 , 对 应 的 高 斯 随机 测度 
{2(4)} 是 以 已 的 子 集 为 指标 的 平稳 过 程 . 由 g 的 恒定 性 保证 (2(A1+2),… ,2Z(An 十 
z)) 和 (Z(A41),…,2Z(An)) 具有 相同 的 分 布 , 其 中 hi + z 是 集合 41 的 z 平移 , 即 
4 +ZI={1:1y=I 十 22E Aj. 

假设 = ia, 中 其 中 0 < a < b< oo, 并 设 G(z) 是 ie, 和 上 有 界 不 减 函 数 . 当 
了 = (zlzz] 时 (其 中 a < zx1 < x2 < 0b) 定义 


G(I) = G(x2) - G(z1), 


则 G 是 半 开 半 闭 区 间 工 = (zi, zx2] C EB 的 非 复 函数 , 置 TD) = G(N1 Nn 12), 可 
证 明 fT(, 2) 是 半 正 定 的 . 当 G 具有 导数 g 时, 证 明 完 全 与 (8.3) 相同 . 至 于 一 般 
情况 , 方法 同 祥 , 只 要 用 增 量 dG(z) 代替 g(z)dz, 并 利用 第 1 章 里 所 叙述 的 有 关 黎 
曼 -斯 蒂 尔 切 斯 积分 的 性 质 即 可 得 出 结论 . 

设 3(D) 是 区 间 了 = (x,y,a < x < yb 上 的 高 斯 随机 测度 , 并 满足 E[2(1)?] = 
G( 站 ). 我 们 定义 关于 连续 函数 f(z) 的 积分 


b 
/ f(z)2(dz) 


为 和 
n—1 
>》 f(zi)2(E) 


4 一 0 


的 均 方 极限 ， 其 中 1; = (ci Ti+1), 0 =7T0 <TI<'.…<rTn=b. 
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设 多 = {zj},a = Xo < Xi<… < zn <b, 确定 [a,4| 的 一 个 分 割 , 我 们 称 分 割 
' = {zi} 是 分 割 多 的 加 细 , 如 果 对 任意 Zi e 兄 , 必 有 zi e 2F'. 令 


ni—l1 
$0; 2)= fe)2(0), = (sno. 


1=0 


大 $(f; 儿 ) 是 非 随 机 的 , 我 们 可 通过 不 断 加 细 分 割 , 并 使 得 和 $(f; 多) 收敛 来 定义 
一 个 积分 . 此 处 $(f; 多 ) 虽 是 随机 的 , 我 们 仍 可 仿效 相同 方法 ， 只 不 过 要 用 均 方 收敛 
来 代替 普通 的 实数 收敛 . 准确 地 说 , 我 们 将 证 明 对 于 任 给 的 s > 0, 存在 一 个 分 割 多 ， 
使 得 对 所 有 加 细 分 割 多 ', 满足 


fu- foo <. 


其 中 上 -| 是 9.2 节 中 的 平均 平方 距离 . 利用 该 节 所 说 的 平均 平方 距离 的 完备 性 , 可 
推 知 当 分 割 不 断 加 细 时 , 存在 一 个 在 均 方 意义 下 的 极限 . 这 个 极限 就 定义 为 积分 


$= / f(z)2(ds), 


由 于 f(zx) 在 [a,4] 上 连续 必定 一 致 连续 , 我 们 可 选择 分 制 多 = {7x;}, 使 函数 f 
在 任何 子 区 间 五 = (zi, zi+l] 上 的 振幅 小 于 


6= Ee/V{G(b) 一 Go 


其 中 s > 0 是 任意 预先 给 定 的 . 设 罗 ' = {zj} 是 罗 的 加 细 . 每 个 区 间 已 = (zz 人 4] 
必 包 含 于 某 个 五 = (zi zi+l] 当然 6j = f(zi) - zy) < 60. 于 是 


fc 2)- Uf S') {$02)- fo 2 


n—l m1 2 
= 是 | flzi)Z(0 — >, ez / 
j=0 


2 
= 上 


旧 


t=0 


rn — 1 


= 2》, aiEjG(T; N 1;) 
i,j=0 


m2—1 
< GD)= 0{G(0) - G(o)} = e?. 


1 二 0 
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由 于 e 是 任意 的 , 所 以 当 分 割 无 限 加 细 时 和 在 均 方 意义 下 收敛. 其 极限 就 是 积 
分 
b 
4 (f) = / f(z)2(dz). 


作为 均 方 收敛 极限 , 这 是 一 个 随机 变量 
积分 ¢ (-) 具有 通常 积分 的 大 多 数 性 质 . 例如 线性 性 质 : 对 任意 实数 w 6 和 连 
续 函 数 万 
¢ (afi + Pf) =a ¢ (f1) + PB(f), 


只 要 我 们 把 上 面 等 号 “=” 理解 为 在 均 方 距离 意义 下 的 相等 , 即 


fos + Bf2) -a 一 8 f (2) 


由 于 ¢ (f) 是 随机 变量 , 我 们 可 以 计算 它 的 期 望 和 方差 . 在 9.2 节 中 已 指出 期 望 和 
方差 在 均 方 收敛 意义 下 是 连续 的 . 这 样 


B | ¢ (| =limE D /ez = 0 
并 县 对 任何 连续 函数 j(7),h(z) 有 
EP(f) p= timE | f(zi)2(1) > h(z;)2(D) 
ff = me |r ne 
= lim》 f(zi)h(z;)GU: Nb) 


1,3 


= Jim f(zi)h(e) | I (z)1r, (zs)dG() 


= 0. 


= lim / b> f (zl ol b> ha) | dG(z) 


b 
- / f(z)h(z)dG(z). (8.4) 
看 起 来 很 简单 , 但 它 都 是 关于 高 斯 随机 测度 积分 的 最 重要 性 质 . 
高 斯 平稳 过 程 的 谱 表 示 
设 2 和 22) 是 [0,mx] 上 的 独立 高 斯 随机 测度 且 满 足 
EI{ZH(1)}] = 2F(7), 
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其 中 ， {= (wi, Ww2|,0 < WwW1 — WwW? < ， 并 且 Fl(w),—7 < WwW < 1, 是 已 知 的 对 称 分 布 东 
数 . 我 们 假设 (0) = F(0--). 读者 可 能 希望 这 样 的 随机 测度 可 用 下 面 公式 表达 
ZW(1) = V2{B(F(w2)) ~ B(F(w))), 


其 中 {B(t);t > 0} 是 标准 布朗 运动 ( 见 第 7 章 ) 利用 随机 积分 $(), 定义 
Xn = 人 cosmwZGtU(dw) 十 [ sinnw2Z2 (dw),， n=0,+1,.…, 
一 fleosnw) + $lsinno) (8.5) 
1 2 


则 E[X。] = 0, 并 根据 (8.4) 有 
ElXn Xnt+ul 


= 万 {feosne) 十 ftsin no) | {fest 十 )w) 十 yn 十 Wo) 


=E feo: nw ) leos(n 十 wo)| 十 五 fein nw ) fsinln 十 ou) 


一 2 | cosnw cos(n + ujwdF(w)+2 | sin nw sin(n 十 由 wd 天 (wj 
0 0 


一 / cos uwdF (w). 


由 定理 7.1 推 得 {X，} 是 具有 对 称 谱 分 布 函数 下 的 协 方差 平稳 过 程 

在 引进 复 值 高 斯 随机 测度 , 则 对 复 值 高 斯 平稳 过 程 有 上 面 平行 的 结果 . 

等 式 (8.5) 利用 高 斯 随机 测度 2(9 表示 平稳 高 斯 过 程 {Xn"}. 我 们 不 加 证 明 地 
反 述 相反 的 命题 . 设 {Xn} 是 具有 谱 分 布 函数 FF 的 高 斯 平稳 过 程 . 公式 


1 — 1 
GAN 一 -一 一 _ j 
2 (A) 5 必 十 2 (Xn X_n )sin | 
2 (A) = 2 > LX, 十 荆 _n) Cos 和 An 
2 On | 


确定 了 有 具有 独立 增 量 的 相互 独立 的 高 斯 过 程 , 其 中 无 限 求 和 号 理解 为 在 均 方 意义 下 . |1515 
如 果 了 = (wi,w2] 和 20(7) = 2 (w2) 一 20(wm), 则 


EH{2°)(7D)}] = F(w2) ~ Flw1). 


916 
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9.9 ”平稳 氮 过 程 


设 sy 是 非 负 半 直 线 [0, co) 的 子 集 族 , 并 假设 形 如 (t, sj,0 < t < s 的 每 个 区 间 
是 好 的 成 员 . 点 过 程 {N(4); 4 € 以 } 称 为 平稳 的 , 如 果 对 于 每 个 实数 h, 任意 正 整 
数 , 以 及 每 个 区 间 组 
(t1, 81],::* , (tk, Sk], 


k 维 随 机 向 量 
CUV 31|， 3 Nt Sk|) 
与 
(N(t1 + hs1 + hye, N(te + hss + hl) 
具有 相同 的 联合 分 布 . 当然 , 大 x 是 整 条 直线 的 子 集 族 ， 或 有 限 维 欧 风量 的 空间 的 
子 集 族 , 也 可 类 似 地 定义 平稳 点 过 程 . 


如 果 {NN(A), 4 € YY} 是 平稳 点 过 程 . 则 对 每 个 固定 t,s > 0， 非 负 整数 信 隧 机 过 
程 


WI(h)= N(t+h,s+hl, h>0, 

是 平稳 过 程 , 因而 也 就 具有 本 章 前 8 节 所 氢 述 的 结果 . 然而 , 点 过 程 的 本 身 特性 须 
特别 加 以 研究 . 

假设 {X(t);t > 0} 是 平稳 过 程 且 它 的 每 一 条 轨道 X(t) 是 t 的 连续 函数 . 固定 
水 平 u 并 令 Nu(s, 引 是 轨道 X(t) 在 时 间 区 间 (s, 避 穿 过 立 的 次 数 . 则 {Nus(s, 革 0 
s <t < oo} 是 平稳 点 过 程 . 在 9.10 节 中 , 对 于 某 些 高 斯 平稳 过 程 {X(t)}, 我 们 将 要 
计算 均值 EIN,(0, 让 . 在 本 节 我 们 只 说 明 一 个 平稳 更 新 过 程 (5.7 节 ) 如 何 导 致 一 个 
平稳 点 过 程 . 

设 下 是非 负 随机 变量 X 的 分 布 函数 , X 具有 有 限 均值 


n=EIX|= / ~ zdF(z) 


= 人 -Poly 
后 面 的 等 式 可 由 分 部 积分 得 到 (也 可 参考 第 1 章 问 题 9). 这 样 ， 
gy) = 1 -下 vy>0, 


是 非 负 的 并 且 积 分 为 1. 因此 它 是 一 个 概率 密度 函数 
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现在 令 Xo, XX1, XX2,… 是 独立 随机 变量 , 其 中 Xo 具有 概率 密度 活 数 g, 而 当 
i 之 1 时 , XX; 具有 分 布 函数 已 在 每 个 时 刻 于 sn = Xo 十 … 十 Xn(n > 0) 处 安置 一 个 
“点 ”, 这 样 就 构造 了 一 个 点 过 程 . 准确 地 说 , 对 任何 区 间 4 = (t, sj, 令 N(A) 是 满足 
t < Sn < 8 的 指标 nn 的 数目 . 

我 们 断言 以 这 种 方式 构造 的 点 过 程 是 平稳 点 过 程 . 此 时 具体 地 表达 向 量 N (0) = 
(N(t1, 81],…,N(tx, sk]) 的 联合 分 布 函数 是 非常 困难 的 . 但 我 们 不 需要 确定 这 个 分 
布 , 仅 需 要 证 明 它 与 位 移 向 量 N(h) = (NN(t 十 h,s1 十 加 ,…,N(tk 十 hsk 十 六 ) 的 分 
布 是 相同 的 . 记 天 为 无 限 维 向 量 (Xo, XI,…), 则 N(0) 是 入 的 向 量 值 函数 . 令 f 
表示 这 个 函数 . 并 令 fi 是 把 立 映射 为 N(h) 的 向 量 值 函数 . 于 是 , 我 们 想 要 证 明 
N(0) = FX) 和 N(h) = 访 ( 瑟 ) 具有 相同 的 分 布 . 但 是 采用 这 种 方法 , 问题 将 变 得 
十 分 困难 . 

证 明 的 技巧 在 于 把 N(h) 表示 为 与 N(0) 相同 的 形式 , 只 不 过 把 函数 f 作用 在 
位 移 序 列 苦 ” = (X6, XX1,…) 上 . 我 们 断言 


N(h) = f(X") (9.1) 
其 中 
Xli=SM-h, X=XMik k>21 (9.2) 
并 且 M 由 
SSM-_1 <h< Sm (9.3) 


确定 . 因此 , 为 证 明 N(h) = f(X') 与 N(0) = f( 半 ) 具有 相同 的 分 布 , 我 们 仅 需要 
证 明 无 限 维 向 量 久 = (X6,X1,…) 和 无 限 维 向 量 瑟 = (Xo,X1,…) 具有 相同 的 分 
布 , 因为 函数 f 对 于 N(0) 和 N(h) 都 是 相同 的 . 

验证 等 式 (9.1) 并 不 太 难 . 我 们 仅 考 虑 一 维 情形 , 这 时 


N(0) = N(t, sl, 
其 中 上 < s 是 固定 的 . 令 #{} 表示 括号 中 的 数目 , 则 
N(t,s] = #{n:t< sn < s} 
= f(X) 
则 : 
N(t+h,s+h]=#{n>0:t+h< Sn, < s+h} 
=#{n>M:t+h<S, <st+h} 


=#{n>M:t<S5,.—h< s} 
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=#{m2>0:t< Sm-M—h< st 
二 #{m>0:t<5” < s} 
= f(X') 


其 中 , 如 前 所 述 , X 和 M 由 等 式 (9.2) 和 (9.3) 给 出 , 并 且 Sm = X60 十 … 十 Xm 
这 样 , 为 验证 {N(4); 4 € 好 } 是 平稳 点 过 程 , 只 需 证 明 


XX 一 (Sm 一 h, 下 MTT XM+2,: …) 


和 
及 一 (Xo0o, X1, X2,:- ) 


具有 相同 的 分 布 . 由 于 M 由 随机 变量 Xo,… ,Xm 所 确定 , 因此 与 XMAH1XMA+2， 
独立 ， 由 此 推 得 Xw+k 的 分 布 与 已 知 M = n 条 件 下 XM+x 的 条 件 分 布 相同 . 利 
用 独立 性 , 它 又 与 Xn+k 固 而 与 Xk 的 分 布 相 同 . 类似 地 , 基 M+1, 芋 M+2，,… 是 独 江 
的 , 并 且 皆 与 Sm 一 h 独立 . 这 样 X!, XX2,… 是 独立 同 分 布 的 , 具有 分 布 函数 下 并 
且 独 立 于 Xb = Sx 一 h. 现在 剩 下 的 只 需要 证 明 X0 = Sw - 疡 具有 概率 密度 函数 
g() = p11 一 F(y)],y > 0. 但 这 一 点 已 在 5.7 节 证 明了 , 其 中 Xb = Sw 一 h 相当 于 
在 时 刻 h 的 剩余 寿命 . 这 样 , 每 个 平稳 更 新 过 程 导 出 了 在 非 负 半 直 线 上 的 一 个 平稳 
点 过 程 . 

下 面 定理 把 上 述 结果 推广 到 整 条 直线 上 . 

定理 9.1 设 {Xn;n = 0, 土 ], 圭 2,…} 是 独立 的 正 随机 变量 序列 . 我 们 假设 
Xk(k = 土 1, 土 2,…) 具有 共同 的 概率 密度 函数 f(z)(z > 0). 并 设 Xo 具有 和 Xo +X6 
的 分 布 , 其 中 X60 ,Xo 的 联合 分 布 由 密度 孙 数 


wf(zt +x-)， 对 于 z+ >0z >0 


确定 . 如 末 “成” 安放 在 实 直 线 上 Sn 一 Xo 十 …， 十 入 mn 和 0_n 一 一 人 0 一 一 及 mn 
处 ， nn 二 0, 1, 2, “0 则 所 导出 的 点 过 程 是 平稳 的 . 


9.10 ”水 平 交 又 问题 


在 本 节 我 们 假设 {X(t); -co < t < oo0} 是 等 均 信和 高 斯 平稳 过 程 , 并 且 其 每 一 条 
轨道 都 是 t 的 连续 函数 . 我 们 固定 水 平 a 并 考虑 轨道 X(t) 在 时 间 区 间 (0, 了 | 内 罕 
过 a 的 次 数 . 这 个 量 在 通讯 理论 以 及 其 他 许多 领域 中 都 是 非常 重要 的 . 要 计算 这 个 
随机 变量 的 分 布 是 非常 困难 的 . 实际 上 , 在 很 多 情况 下 显 式 表 达 式 是 未 知 的 , 我 们 仅 


i 
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局 限于 计算 其 一 阶 矩 , 或 均值 , 并 且 还 附加 下 面条 件 : 


d2 
A» 一 -ja Rt) 10 < O00, (10.1) 
其 中 R(t) 是 过 程 的 协 方差 函数 
我 们 把 下 面 推 导 中 用 到 的 一 般 结论 列 为 引 理 . 


对 点 过 程 使 用 记号 
N(D)= N(s,tl, I=(s,tl, Ogs<t 
我 们 说 {NN( 了 有 } 没有 多 重 事件 , 如 果 
lim N(t 一 (1/n), 丰 =0 或 1, 对 于 所 有 t. (10.2) 


9.9 节 的 更 新 点 过 程 就 提供 了 具有 这 样 性 质 的 一 个 例子 . 


5| 理 10.1 设 {NUD} 是 没有 多 重 事 件 的 点 过 程 , 固定 了 > 0, 并 分 割 区 间 
(0, 1 为 no 个 子 区 间 


Tn = (i oT/n,iT/nl,i= 1, mi n= 1,2,..- 
则 
E[IN(0,T] = lim >_Pr{N(Inw) > 1}. (10.3) 


4=1 


| 1， 车 N(Ini) > 1 
【0 其 他 


及 N， = 5 xni 则 Nn < NaH < N(0,T], 并 由 (10.2) 知 ，lim Nn = 和 (0,7T]. 可 以 
+= 1] 
验证 极限 号 与 期 望 可 以 交换 , 由 此 得 到 


hn 
lim 2_Pr{N(Ini) > 1} = lim EINn] = EIN(0,T)]. 
《一 上 上 


首 

等 式 (10.3) 表明 可 使 用 小 区 间 上 事件 的 分 布 来 表示 在 [0, TI 上 事件 的 平均 数 

我 们 感 兴趣 的 是 由 连续 过 程 穿 过 水 平 所 确定 的 事件 . 下 一 步 我 们 来 研究 过 程 刁 人 

在 一 个 区 则 里 千 过 水 平 a 的 次 数 . 为 此 , 我 们 需要 关于 “ 穿 过 ”的 恰当 定义 , 固定 a， 
称 X(t) 在 to 处 穿 过 a, 如 果 对 于 任 给 正 数 <, 存在 点 友 和 妇 , 一 方面 满足 


|t; 一 如 | < E£, 4 一 1,2, 


| | 


519 


520 


470 第 9 章 平稳 过 程 
丸 一 方面 
[X(ti) 一 d | 和 (人 t2) —al < 0. 


注意 , 大 在 如 足够 小 的 邻 域 , X(t) 不 超过 (或 不 小 于 )a 但 在 如 处 达到 a, 这 时 不 能 
看 作 穿 过 o. 令 Na(0,T] 是 X(t) 在 区 间 (0,7] 穿 过 a 的 数目 . 


5| 理 10.2 设 {X(t)} 是 每 条 样本 轨道 都 连续 的 随机 过 程 , 并 且 对 每 个 男 定 
t, Pr{X(t) =0}=0 则 


ElN.(0,T] = lim If (一 ) < 的 } 
>) 


证 明 ”这 个 结果 差不多 与 引 理 10.1 是 相同 的 , 令 


{SD 


0， ”其 他 . 


显然 , N = 》, Xi < Nn, 所 以 由 引 理 10.1 有 


i 二 1 
lim sup EIN;| < EIN,(0, TY)), 
男 一 方面 , 对 每 个 固定 的 n, 当 m 足够 大 时 , 显然 有 Nn < Ni, 因为 在 这 种 情况 下 ， 
例如 , (X(t1) 一 a) < 0, (X(t2) 一 a) > 0, 对 满足 
G— UI <ti<to< 
n n 
的 五 , 妇 成 立 , 将 推 得 
mm 
对 某 个 Tn 的 子 区 间 Lm; 成 并 . 我 们 已 排除 X(t) 在 形 如 t=ri 的 点 上 竺 过 a 这 
个 等 概率 事件 , 其 中 ”> 是 (0,1] 上 有 理 数 . ] 这 样 ， 
lim inf E[N»,] > E[Nn), 


并 且 
和 由 由 和 _ 
lim inf E[N,,) > lm inf E|Nn) = E[Na(0, T). 
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这 就 完成 了 证 明 . 图 
因此 , 在 一 个 区 间 上 穿 过 a 的 平均 数 的 计算 可 以 通过 研究 下 面 比 较 简 单 的 事 


C3) 
C(x() 


来 实现 . 如 果 过 程 是 平稳 的 , 这 些 事件 分 别 与 事件 


件 . 


A(n) = {X(0) <a < X(T/n)} 
和 
B(n) = {X(0) > a > X(T/n)} 
具有 相同 的 概率 . 
定理 10.1 令 {X(t);t 之 0} 是 零 均值 高 斯 平稳 过 程 ,并且 其 每 条 轨道 关 (t) 是 


t 的 连续 函数 . 假设 协 方差 函数 R(t) 满足 (10.1), 并 设 X(t) 的 方差 o” = R(0). 则 在 
(0,T] 上 竺 过 水 平 a 的 平均 次 数 可 由 下 式 计算 


EINa(0,7)] = 二 (Na/a2)2exp(-o212c3) 


证 明 ”由 平稳 性 可 知 , 最 后 结果 一 定 与 了 成 正比 , 因此 我 们 仅 需要 处 理工 = 1 
的 情况 . 根据 前 面 的 引 理 . 我 们 的 任务 是 计算 


E[Na(0,1}|] = im n[Pr{A(n)} + Pr{B(n)} 
= lim 2"[Pr{A(2")} + Pr{B(2")}). 
由 于 4(2") 是 由 X(0) 和 XX(2-") 确定 的 . 它们 的 联合 分 布 是 均值 为 0, 方差 为 
0? = R(0) 的 正 态 分 布 , 其 相关 系数 为 p(2") = R(2-")/R(0).( 关 于 二 元 正 态 分 布 的 


性 质 可 见 第 1 章 . ) 令 
bn = 2°[X(27") ~ XO0). 


随机 变量 对 关 (0), Cn 具有 二 元 正 态 分 布 , 直接 计算 可 以 说 明 其 均值 为 0, 其 协 方差 
矩阵 是 


R(O) -2"[R(0) — R(2-")] 
-2"°[R(0) — R(27")] 2°{2"[R(0) — R(27")) — 2°[R(-27") — R(O))} 
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在 计算 上 面 矩 阵 元 素 时 , 注意 利用 对 称 性 R(-2") = R(2-"). 依 假设 (10.1), 这 个 定 
阵 当 n 一 oo 时 收敛 于 

RO0) RR(O) 
R'(0)  R"(0) 


0“ 0 
0 A2 
其 中 R(t) 和 R(t) 分 别 是 R(t) 的 一 阶 和 二 阶 导 数 . 由 R(t) 的 对 称 性 以 及 RR'(0) < 
oo 存在 性 的 假定 , 推 得 R'(0) = 0. 令 pn(z,z) 表示 Xo) 和 Cn 的 二 元 正 态 分 布 的 密 
度 . 注意 B(2") 可 以 表示 为 
B(2*) = {X(0) > a > X(2 ")} 
= {a < X(0) <oa— 2 "0,}. 


(10.4) 


计算 
27Pr{B(2")} = 2"*Pr{a < X(0) <a—2 "Cn,} 
0 Qa—2 "z 
= ”| / pn (x,Z)drdz 
0 op 
一 / | pn(Q + 2 "7r,z)drdz. 
一 co v0 


利用 第 1 章 给 出 的 二 元 正 态 分 布 的 密度 函数 表示 式 , 并 注意 到 X(0) 和 Gn 的 协 方 
差 宛 阵 收敛 于 (10.4) 的 矩阵 , 我 们 推 得 


1 li[/a\2 2z? 
im pn(a+2-nz,2Z) = 一 一 exp4-=| (二 ) + 一 
lim p (a 十 小 2) A ep 9 (2) 十 二 | 


1 /a ] 2 
5 (i ) 
其 中 ) 
exn(_r? 
7) = -页 xp( , /2) 
是 标准 正 态 分 布 密度 . 
这 样 ， 


im 2"Pr{B(2”)} = 三 人 一 4 (=) -元 4 ( 元 ) dzdz 
-上 遍 儿 遍 儿 


= 6 (2) 人 vod 


UU UO 
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当 计算 lim 2"Pr{4(2")} 时 , 也 得 到 相同 的 结果 
因此 ， 
EIN,(0,1)] = 2 lim 2"Pr{B(2")} 


VA 1 /a\2 
-op{-3(9)} 
这 就 是 我 们 要 证 明 的 . 图 
更 细微 地 , 我 们 说 和 的 在 to 上 罕 水 平 线 a, 如 果 人 存在 某 个 e > 0, 对 于 如 一 << 
t <to,X(t) <a, 对 于 to <t<tot+e, 六 (t) > 4a. 令 U6(0,T] 是 在 (0, 了 Ti 内 上 罕 的 次 
数 , 则 


BIDa(0,1]] = lim 2°Pr{ A(2")} = 3 exp( 一 o2/2c3) 


在 结束 本 节 和 本 章 之 际 , 我 们 在 这 个 迷人 的 概率 论 领 域 中 叙述 一 个 比较 近代 的 
结果 . 我 们 目的 是 激 起 读者 进一步 阅读 有 关内 容 的 兴趣 . 当 水 平 a 增加 时 , 上 和 穿 变 
成 越 来 越 少 , 这 样 就 出 现 了 类 似 泊 松 性 质 的 可 能 性 . 日 然 , 当 a 增加 时 , Uo(0, 卫 将 
变 得 比较 小 , 从 而 我 们 需要 正规 化 . 令 


f(0) = 2 exp(-o2/2o9) 


和 
Na(t) = Ua(0,t/f(a)). 

这 时 E[N,()] = 以 下 是 这 方面 的 结果 ， 

定理 10.2 “利用 上 面 使 用 的 记号 . 令 六 (i) 是 高 斯 平稳 过 程 , 具有 连续 轨道 和 
协 方差 函数 Rb), 这 里 Xe = Re'(0) < co. 假设 下 面 两 个 条 件 之 一 成 立 , (i) 当 t 一 oc 
时 , R(E) Int 一 0; (i) | R(s)?ds < co. 则 {Na(t);t > 0} 的 分 布 当 a» oo 时 收敛 
于 泊 松 过 程 的 分 布 

猜测 为 什么 会 有 这 样 的 结果 , 我 们 注意 到 Gi) 和 (i 都 荀 涵 着 渐 近 独立 , 由 此 体 
现 出 了 泊 松 过 程 的 独立 增 量 性 质 . 


初等 问题 
问题 1~5 均 在 下 述 条 件 之 下 考虑 : 设 {Xn} 和 {Yh} 是 分 别 具 有 协 方差 函数 Rx (wd) 


323 
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和 Ry(u) 的 零 均值 协 方差 平稳 过 程 . 令 Rxy(4) = [XnYn4wl, = 0, 土 1,…, 为 互 协 方 
差 函 数 . 并 设 {&} 是 协 方差 函数 为 Re(w) 的 零 均值 协 方差 平稳 过 程 , 目 与 {Xn}, {Yh} 是 
无 关 的 .“ 最 佳 * 预测 量 、 估 计量 等 都 在 最 小 均 方 误差 的 意义 下 . 

1. (a) 求 Xn+1 的 形 如 对 由 = aXn 的 最 佳 预测 量 , 其 中 a 是 待定 常数 

解答 : a* 二 Rx(1)/Rx(0). 

(b) 求 Xn 的 形 妇 侈 @， = aXn 十 5Xn 1 的 最 佳 预测 量 , 其 中 a,b 是 常数 

解答 ,o* = 二 [Rx(D)Rx(0) - Rx(1)Rx(2)) 


b* = [Rx (0) Rx(2) 一 Rx (1)), 
其 中 A = Rx(0)? - Rx(1)?. 
(c) 试用 Rx(W) 表达 信人， 对 2 在 均 方 预测 误差 意义 下 的 改进 . 


Rx(1)? 


2. (a) a X 的 形 如 区 如 ) = aY 的 最 佳 估计 , 其 中 a 是 待定 常数 
解答 : a* 二 Rxy (0)/Ry(0). 
(b) 试 求 六 的 形 如 甘 名 ! = aYn + bY,_1 的 最 佳 估计 , 其 中 a,b 是 常数 . 


解答 a* = 基 [RxY (0)Ry (0) — Rxy(D) Ry(1)] 


六 = A [Ry(0)Rxy(1) _ Ry(1)Rxy(0)], 其 中 A = Ry(0)? -~ Ry(1)?. 
3， 把 XX, 解释 为 信号 ，&;。 为 噪声 ， 记 2 = X 十 bn. 试 求 X 的 形 如 区 /，= 
Qn + beén-1 的 最 佳 估 计 ， 其 中 a 和 是 待定 常数 ， 


解答 : a* 一 [Rx(O){Rx(0) + Re(0)} — Rx (1)}{Rx(1) 二 Re 


六 = XRx(0) + Re(O)}Rx(1) ~ {Rx(1) + Re(1)}Rx(0)) 
其 中 A = {Rx(0) + Re(0)}* ~ {Rx(l) + Re(1)}’. 
4. 求 Xn+k 的 形 如 Xn+Hk 二 aXn 十 bXn+N 的 最 佳 插值 , 其 中 1 < kk < N 是 固定 的 ， 
并 且 a,b 是 待定 常数 
解答 : a” 二 XlRx(k)Rx(O) — Rx(N)Rx(N — &)), 


b* = XIRx(ORx(N —k)— Rx(k)Rx(N)), 
其 中 A = Rx(0)? — Rx(N)?. 


N 
5. 固定 NN > 1, 并 记 Zr = 》 Xn+tk. 求 Zn 的 形 如 下 式 的 最 佳 估计 量 


k=0 


Zn = aXn + bXAn+N, 
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其 中 a,b 是 待定 常数 . 

6. 对 于 n= 1,2,… 令 Xn = 二 cos(mU), 其 中 UU 均匀 分 布 于 区 间 [一 Xx, rj， 试 证 明 
{Xn} 是 协 方差 平稳 但 不 是 严格 平稳 过 程 . 

提示 : 第 一 部 分 使 用 三 角 和 恒等式 


1 
COS TX COSY = Jicos(z 十 切 十 cos(tz —y)|. 


由 对 称 性 求 得 
1 和 若 4=10 
0 知人 二 1,2,.…. 


对 于 第 二 部 分 , 利用 同样 方法 确定 三 阶乘 积 矩 已 [XnXXnwu 关 n+uth] 依赖 于 7 

7. 设 1B();t > 0} 是 标准 布朗 运动 . 试 计算 XX() = B(t + 1) 一 B(t),t 0 的 协 方 
其 函数 , 并 证 明 X(t) 是 严格 平稳 过 程 . 

1~-ju 当 lvlg1, 

Y= | 0， 当 lu| > 1 

8. 计算 Xn = V24sin(wn + 了) 的 协 方差 函数 , 其 中 4 是 均值 为 0 方差 为 o? 的 随 
机 变量 , U 是 独立 于 4 的 在 [0,2n) 上 均匀 分 布 的 随机 变量 , w 是 满足 0 < w < 2x 的 常 
数 


ElcosuU| = | 


9. 假设 {Xn;n = 0,1,…-} 是 零 均值 平稳 过 程 , 且 又 是 高 斯 过 程 和 马尔 可 夫 过 程 . 证 
明 其 协 方差 画 数 必 具有 形式 R(w) = o? 和 I, 其 中 和 为 满足 | 和 | < 1 的 某 个 固定 常数 

10. 求 对 应 于 协 方差 函数 R(0) = 1 和 R(w) = a7“ ,= 土 1, 土 2,… 的 谱 密度 函数 ， 
其 中 0<a<l 和 |yY|<1. 

提示 : 记 Ru = Ri(4) 十 Ro(w), 其 中 


1] 一 Q， uw = 0, 
Ww) = | 0, uA 0. 

及 Ro(W) = oy 对 所 有 公 

11. 设 有 协 方差 平稳 过 程 {X}, 若 在 已 知 全 过 去 下 X。 的 最 佳 线性 预测 量 为 区 ,= 
Q1Xn--1 十 a2AXn-2. 试 求 其 谱 密 度 函 数 . 

提示 : 由 

én 一 Xn 一 XX 一 Xn 一 Q1 入 1 一 Q2AXn_2 
推 得 
oe fe(N) = oz|1 一 aie ~ a2e* | fx(N), 


但 由 于 部。 是 最 佳 预测 量 ，{e,} 是 不 相关 的 , 且 fe( 和 ) = ， -x < 入 < x 从 而 解 出 fx. 


7 
1 
和 
4 
i 
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癌 题 
1. 设 {én} 是 独立 同 分 布 随 机 变量 序列 , 其 均值 为 0, 方差 为 02. 令 {an} 是 实数 序 
列 . 证 明 当 》 2 < oo 时 和 = 》 ané&n 必 均 方 收 化 ， 特 别 地 ，》 (1/n)&n 收敛 ]. 令 
n=0 n=0 
{mn} 是 零 均值 协 方差 平稳 过 程 , 其 协 方差 函数 为 R(v). 证 明 若 


OO OO 


D2 laiosR(i ~- | < oo， 


t 一 0 7 一 0 


则 》, any 均 方 收敛 . 


nn 二 0 

2. 设 六 ,XX1, 2,… 是 具有 有 限 二 阶 怎 随机 变量 序列 证明 lim 上 Xn 一 XE = 0, 当 
目 仅 当 以 下 两 个 条 件 满足 ，(i) 对 任意 满足 E[Y”] < oo 的 随机 变量 Y，lim E[XnY] = 
E|XY|.(ii) Jim [Xl = |Xl. 

3. 设 

q 
W, = Doi;V2 cos(Ajn — Vj), 
j=1 

证 明 {Wn} 是 协 方 差 平稳 过 程 并 计算 其 协 方差 函数 . 

4. 考虑 满足 下 式 的 协 方差 平稳 过 程 {Xj}: 


人 nil 一 Q1 及 mn 十 Q2 和 nm 一 1! 十 Sn 十 1 


其 中 a1, a2 为 常数 ，{e 为 零 均 值 不 相关 随机 变量 列 , 上 且 E[E2] = o* 及 El&nXn-k] = 
0,k = 1,2,…. 过 程 {Xn 上 的 相关 函数 记 为 p( = 有 /有 0), 试 证 明 pu) 满足 Yule- 
Walker 等 式 


p(1)=a1+a2p(l) 和 p(2) = aip(1)+ a2 


并 利用 p(1) 和 p(2) 确定 al 和 a2. 

5. 证 明 不 存在 一 个 协 方差 平稳 过 程 {Xn} 满足 随机 差分 方程 Xn = Xn-1 十 en, 其 
中 {en} 是 不 相关 随机 变量 序列 , 其 均值 为 0, 共同 方差 vc2 > 0. 

6. 设 {Xn}+% 是 零 均值 协 方差 平稳 过 程 , 且 具 有 协 方差 函数 R(u) = rlvlv = 
0, 土 1,…, 其 中 |r| < 1. 试 求 在 已 知 全 部 过 去 Xn, Xn。_1,… 时 , XXn+1 的 最 小 均 方 线性 预 
测量 . 


由 题 477 


7. 设 {en} 是 具有 单位 方差 、 零 均值 的 不 相关 随机 变量 序列 . {Xn} 是 如 下 形式 的 滑 
动 平 均 过 程 
Xn 一 En 十 [El 二 Ten-2 十 六 cn-3s 十 …， 
其 中 6 和 了 是 常数 , | < 1ilal < 1 上 且 a = 一. 试 求 在 已 知 全 部 过 去 Xn, Xn 1 
的 条 件 下 XXn+1 的 最 小 均 方 线性 预测 量 . 
8. 设 {Xn} 是 协 方 差 函 数 为 Rx (OU 的 零 习 值 协 方差 十 稳 过 程 ， 且 其 谱 密 度 范 数 为 


fx(w), 一 x < w < Xx. 假设 {an} 是 满足 条 件 》 |aiajR(i -~ 站 | < oo 的 实数 列 , 定义 


2 7 一 0 


OO 
k= 二 0 


证 明 {Yh} 的 谱 密 度 函 数 由 下 式 给 出 


ooc 
》 pe 
k=0 


2 


fx(w), 


4 
fy(w) = 2 


OO 


》 ajak cos(j 一 从 中 ra -NT<w&T 


j,k=0 


2 
一 入 
2 
Y 


9. 试 确定 对 应 于 协 方差 函数 R(w) = 7 = 0, 土 1,…,( 此 处 |y| < 1) 的 谱 密度 函 


数 . 四 
全 业 : fw) = 3 yop 


10. 考虑 如 下 形式 的 自 回 归 过 程 {Xn}: 


“TT<wWw< 区 . 


从 nm = 二 D1Xn-1i 十 … 十 /加 入 ng + én) 


其 中 {én} 是 零 均值 、 单 位 方差 的 不 相关 随机 变量 序列 , 并 设 29 一 B29 i 一 .… 一 Ba 二 0 
的 4 个 根 绝对 全 均 小 于 1. 试 求 {Xn} 的 谱 密 度 函 数 


答案 : f(w) = 人 ， 一 XTX<w<n,. 


11. 试 计算 滑动 平均 过 程 Xn = én 十 altn-1 的 谱 密 度 函 数 , 其 中 {En} 是 零 均值 、 单 
位 方差 的 不 相关 随机 变量 序列 . 
1 十 Qf 二 201 cos 入 
答 娄 : f( 和 ) = ao 
12. 设 {Xn} 是 有 限 滑动 平均 过 程 


qd 
An 一 >》 artn_r， Qo = 1, 


人 一 
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密度 函数 A{ 入 ) 可 以 写 为 ， 
1 iX ,|2 
f(N) = zo 1 好 | 
其 中 41 Cg 是 
9 
》 arzg 一 0 
7 一 0 
的 9 个 根 . 
13, 试 证 明 : 预测 量 


he 


在 已 知 -1 ……An-p 条 件 下 XX 的 所 有 线性 预测 量 中 是 最 佳 的 , 当 且 仅 当 
Tt p 
和 ao tt 
一 (一 1 
其 中 下 (w) 一 x < w < ,是 协 方差 平稳 过 程 {Xn} 的 谱 分 布 函数 . 
14. 设 {Xn} 是 零 均值 的 协 方差 平稳 过 程 , 具有 正 的 谱 密度 函数 f(w), 且 方 差 oz = 1. 


科 和 尔 莫 威 罗 夫 公式 指出 
02 一 ep 去 三 nanf(w)dw | ， 


其 中 o2 = inf 玖 || 念 ,- X|2] 是 已 知 过 去 的 条 件 下 XX 的 最 小 均 方 线性 预测 误差 . 试 对 
R{u) = yr = 0, 土 ],…,|yY| 过 1， 


验证 科 尔 莫 戈 罗 夫人 公式. 
15. 试 由 


1 OO 
一 一 一 一 全 入 研 
FA) 5 2 R(k}cos AR， —Ax<A<n, 


导出 
R(u) = / (cos Au)f (A)dA. 


16. 考虑 滑动 平均 过 程 、 
530 | An 一 >》 QkEn—k; 
k=0 
其 中 {&n} 是 零 均值 、 单 位 方差 的 不 相关 随机 变量 序列 , 且 ao 01,… 是 满足 条 件 > ,ax < 
oo 的 实数 列 . 试 计算 其 协 方差 函数 及 谱 密度 函数 
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17. 考虑 下 面 非 平稳 线性 模型 
Xn = 0 十 En， 


其 中 OA+1 一 0 十 Sn+1) nN 一 0, ] 9 to, 01; 62， “"" 和 EQ E19 均 为 零 均值 不 相关 ， 
E[l06] = vi, EIG] = ,和 Ble = 02, 此 处 v2 = ao,a = 好 /(o3 + 2).( 我 们 把 
{Xn} 解释 为 对 0 过 程 的 噪音 畸变 观测 .) 试 求 在 已 知 Xn, Xn_ 1 ,Xo 时 Xn1 的 最 
小 均 方 误差 线性 预测 量 . 
答案 ， 
Xo=0 
Ki = aoXr II+( 一 oa 1, k=1,2,..., 
其 中 = vw/(vh + 02). 
18. 设 {Xk} 是 滑动 平均 过 程 


cc co 
~ 》 _ 》 2 
Xn 尘 Qjén-j) C0 二 ] ， 0Q; < O00, 
二 0 


I=0 


其 中 {&n} 是 零 均值 且 具 有 共同 方差 o* 的 独立 随机 变量 序列 . 证 明 


Un = 》 Xk1ék, n= 0,1,.…, 
k=0 


+ 
Vn = > Xe — (n+ 1)o?, n = 0,1,..., 
k=0 


关于 {én} 是 加 . 


19. 记 i = V-=-1. 定义 复 值 函数 关于 高 斯 随机 测度 的 积分 为 实 部 和 虚 部 积分 之 和 . 类 
似 地 , 定义 晴 数 关于 复 值 随机 测度 


(1) =é€(D) +in(D), I=(s,tl, s<t. 
的 积分 为 实 部 和 虚 部 之 和 . 由 表达 式 


=/ cosnwZ (dw) + 上 sin nw2(2) (dw), 
0 0 


并 
及 一 |/ e— "WC (dw), 1 一 0, 土 ] ,.….…， 
一 其 


Dj 
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转 
cg]= -= 3520(s), 0<s gn 
由 1 
n(s) = 7(~s) = 5Z (s),0 <s&n. 


注意 到 上 (7) = (一 了 和 7(1) = 一 n( 一 了 ,其 中 T=(s,t],~T=(-~t,-sj,0< st 


Ce | 


试 计算 鳌 [CRjcail, 其 中 五 = (si 可 ,一 一 ”表示 共 斩 复 数 . 
20. 假设 Xo 具有 概率 密度 函数 


车 已 知 Xo0,…, Xn, 则 XXn+1 是 (1 一 XX, 1] 上 均匀 分 布 随 机 变量 . 试 证 明 {Xn} 是 平稳 
届 历 过 程 . 

21. 证 明 每 个 独立 同 分 布 随机 变量 序列 及 1, 羡 2,…… 构成 一 个 过 历 平稳 过 程 

22. 设 Z 是 [0, 1) 上 均匀 分 布 随机 变量 . 令 Xo = 和 和 Xin+l = 2Xn(mod1), 即 


l 

2 入 n， 如 果 An < 

2 

愉 n+1 一 1 
2Xn 和 ] 如 果 和 Xn 之 9 


} 


(a) 证 明 如 果 2 = 0.202122.… 是 2 的 二 进 制 展开 : 2 = 》 2-%+DZh, 则 Xn = 


k=0 
0.2ZnZn+1''…-(b) 证 明 Xn 是 平稳 过 程 . (c) 证 明 { 尖 %} 是 录 历 的 . (d) 利用 遍历 定理 证 明 
以 概率 1， 


1 ?一 、 1 
一 FT 二 
nD 


其 中 {z} 表示 xz 的 小 数 部 分 ({z} = 一 [xz], zx] 是 不 超过 z 的 最 大 整数 ). 
23. 设 {6%} 是 具有 等 均值 单位 方差 的 独立 同 分 布 随 机 变量 序列 . 证 明 : 每 个 滑动 平均 


TY 
Xn = 》 okpénk n= 0,+l,.… 


k=0 


是 遍历 的 . 若 》 ax < oo, 同样 的 结论 对 于 


Yn 一 》 QkEn—k 
K=O 


是 否 成 立 ! 
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24. 一 个 随机 过 程 {Xn} 称 为 是 弱 混 合 的 ， 如 果 对 于 任意 实数 列 (z1, zz …) 的 集合 
A,B, 


im - DPr{Xu Xo .EA 和 (Xk, Xe,...) € BB} 
= Pr{(X1, Je A} x Pr{(X1, Xo,...) € BY. 
证 明 每 个 弱 混 合 过 程 是 遍历 的 . 
注 为 了 证 明 轮 混合 ， 只 需 证 明 对 每 个 7 一 ] 2， 实 回 量 (zl， , Tm) 的 任意 和 集 
合 4,B 有 
1 Ef 
im ny 2 PHO ~ ) 天 mm) EA 和 和 (Xk+l) 0 ; 浅 k+ms ) 三 B} 
= Pr{(X1,..., Xm) € A} x Pr{(X1,..., Xn) € BY. 
25. 设 {6&%} 是 等 均值 协 方差 平稳 过 程 , 协 方差 函数 为 


Elénéml] 一 | 


1， n= Mm, 
p, ”于 天 了 
其 中 0 < P< 1. 试 证 明 {6} 有 表示 式 6 = 二 V0 十 Tw. 这 里 也 mT,72，… 是 零 均 值 不 相关 
的 随机 变量 , E[U”] =p 县 EImnz|=1-p. 

提示 ， 利 用 均 方 遍历 定理 于 U = lim(&1 十 … 十 如)/n. 置 hw。 = & 一 UU 并 计算 
ElUén], EIV®] 和 五 [nm] 

26. 设 {Xn} 是 具有 有 限 状 态 不 可 约 马尔 可 夫 链 ， 其 转移 概率 矩阵 为 |Piy| 玉 1. 于 
钙 存在 一 个 平稳 分 布 x， 即 一 个 向 量 T(1)……T(V),， 满足 7(i) > 0,i = 1,.…,N, 


2_7(i) =1, 且 


N 
nj) = DTPy, j=1,.,N. 


?一 芋 
27. 设 {BG,t > 0} 是 标准 布朗 运动 , 所 对 应 的 高 斯 随机 测度 为 B(T) = B(t) 一 
B(s),T= (s, 引 0 入 s<t 上 证 明 若 f(w),u 0 是 有 界 连 续 函 数 ， 则 


Y@) = /Ac)B(tz)，t>0 


是 一 个 拷 . 
28， 设 {B(t),t 之 0} 是 标准 布朗 运动 所 对 应 的 高 斯 随机 测度 为 B(I) = B(t) 一 
B(s),T= (s, 丰 ,0 < s <t. 设 f(w) 是 [0, 有 加 上 连续 函数 . 证 明 


t+h 
Y(t) = / f(u—t)B(du), t>0 
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是 一 个 平稳 过 程 . 
29. 在 定理 10.2 条 件 之 下 , 证 明 


lim Prf max  X(s)<wlf=e 一 ， 
w 一 co “0O<sSt/ Fw) 


其 中 


f(w) = V2 exp(-oz/2o9) 


30， 设 {B 人 ;0 < t < 1 是 标准 布朗 运动 ， 所 对 应 的 高 斯 随机 测度 为 B(D) = 
B(t) — B(s),T = (s,t],0 < st < 1. 试 证 明 人 恒等式 


E om / /dB = exp (让 / f*(s)ds ， -oo < 入 < oo， 


其 中 f(sj,0<s<1, 是 加 续 本 雪 
31， 设 {B(t);0 < t < 1} 是 标准 布朗 运动 ， 所 对 应 的 高 斯 随机 测度 为 B(I) = 
BO 一 po Tedossstsl 试 证 明 ， 8 和 f(s)g(s)ds 二 0 的 


有 界 连续 函数 , 则 UU 二 [ f(s)dB(s) 和 V = [ g(s)dB(s) 是 相互 独立 的 随机 变量 
0 0 
附 1C 


为 更 好 地 了 解 平 稳 过 程 的 谱 理论 , 请 参阅 Yaglom 的 书 [2]. 关于 平稳 过 程 的 许 
多 问题 , 包括 水 平 交叉 问题 , Cramer 和 Leadbetter 已 作 了 专门 的 讨论 ( 见 [1]). 


参考 书目 


[1] Cramer, H, and Leadbetter, M. , Stationary and Related Stochastic Processes. Wiley, 
New York, 1966， 


(2 Yaglom, A.M., An Iniroduction to the Theory of Stationary Random Functions. Prentice- 
Hall, Englawood Cliffs, New Jersey, 1962. 


[3] Anderson, T. W., Statistical Analysis of Time Series. Wiley, New York, 1973. 


附录 和 矩阵 分 析 的 复习 


A.1 谱 定 理 
A. 概念 介绍 (线性 无 关 和 基 ) 


所 有 元 组 (向 量 ) x = (zl ,Zn) 的 集合 构成 一 个 n 维 辣 量 空间 , 其 中 zi 
为 复数 , 定义 两 个 癌 量 z = (zi1,…,zn) 和 Y= (,… ,yn) 的 和 多 十 Y= (zl 十 
;Tn 十 Yn), 及 回 量 z 与 一 个 复数 入 的 乘积 Xz = (X71,… ,和 zn). 

一 个 向 量 组 z 史 ,…: ,zm 被 称 为 是 线性 无 关 的 , 如 果 由 等 式 clzt) 十 coz(2) 十 
十 crgt) 二 0 可 以 推出 ci = co =…= cr = 0. 例如 ,我 们 给 出 向 量 (1,0,:…,0)， 
(0, 1,…,0), …. , 显然 它们 是 线性 无 关 的 . 一 个 元 组 的 线性 无 关 族 不 可 能 多 于 n 
个 柯 量 . 

区 pprF < Nn) 是 一 线性 无 关 组 , 行 存在 一 个 向 量 Pr+l 不 是 p1,… ,py 的 
线性 组 合 , 即 不 能 表示 为 cip1 十 … 十 crp: 的 形式 , 则 p1,…, pi, p41 线性 无 关 , 继 
续 按 这 种 方式 进行 下 去 , 我 们 可 以 用 向 量 p44)… ,Pr 扩充 pi,…, pr 使 p1,… ,4p 
是 一 线性 无 关 组 , 因为 线性 无 关 组 至 多 包含 ”个 元 素 , 所 以 对 每 一 个 向 量 y 和 每 一 
线性 无 关 组 gp1,…, 9p。 都 存在 常数 cu, …,cn( 且 唯一 ) 使 y= cip1 十 … 十 cnpn 

类 似 的 结果 也 适用 于 任何 线性 流 形 珠 ( 称 向 量 集 . 为 线性 流 形 , 若 x,y € 0 
则 对 任意 的 复数 a,b 都 有 az + by € 顷 )， 对 这 样 一 个 线性 流 形 员 , 它 的 维 数 是 
唯一 的 , 记 为 整数 m(0 < m < n), 从 而 纲 中 的 最 大 线性 无 关 组 包含 m 个 元 素 ， 
假如 WP1 PrT < mM, 是 听 中 的 线性 无 关 组 , 则 有 一 向 晤 prii € 引 ， 它 不 能 
由 把 1，， 入 7 的 线性 组 合 来 表示 ， 则 我 们 可 以 推断 存在 Prils''' Pm EM, 使 得 
Pp1,… ,pm 是 一 线性 无 关 组 , 而 且 对 任意 的 VE 叫 , 存在 ( 且 了 唯一 ) 常数 cl,…… ,cm， 
Ci1P1 十 …' 十 cmPpm 二 VY. 注意 到 , dim 纲 =0 表示 级 中 只 包含 0 元 素 , 而 dim MM=n 
表示 它 包含 任何 问 量 , 假如 dim 级 =m, MM 中 任何 m 个 线性 无 关 向 量 组 都 被 称 为 
g 的 基 . 任何 ”个 线性 无 关 向 量 都 可 以 称 为 “ 基 ". 


B. 内 积 


两 个 向 量 z,y 的 内 积 定义 为 (2,9) = >》 zi9:( 其 中 生 为 yi 的 复 共 思 g) ,我们 很 


二 
容易 证 明 下 述 内 积 性 质 : 
(i) (z,z) > 0, 当 且 仅 当 x = (0,…,0) = 0 时 等 式 成 立 . 
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( 刘 (Xz,2 = X(z,2) ,其 中 和 为 复数 

(ii) (z2, 9) = (y, 2), 由 (区 得 , (z, Ay) = AM(z, 9). 

两 个 向 量 z 和 y 称 为 正 交 的 , 如 果 (2,9)=0. 一 个 向 量 z 的 范 数 定 义 为 |lz|| = 
(2, 2)z. 

一 个 复数 集 {aiy}(i, 3 = 1,. “…,n) 定义 一 个 n 维 ( 方 ) 矩阵 ， 通常 表示 为 A= 
[lei;||, 2, 3 一 1 ， I 一 个 nxXN 定 阵 A 定义 nN 维 问 量 空间 的 一 个 变换 (或 算 子 )， 


Ax = yi 二 aur7i 一 1,..:,n, 或 TA = 多 ,2%j 一 Dziai,j 一 1 7 一 
7 一 1 4 一 1 
4taz +D)=a4z+0437， (ari+pbBy)A = arA+ibByA, 


进一步 , (z, Ay) = (z4, 切 , 这 里 和 是 mxm 和 矩阵, 其 元 素 为 a;. 这 里 由 右 运 算 和 左 
运算 产生 的 两 个 变换 是 相互 对 偶 的 . 我 们 可 以 在 大 部 分 矩阵 论 的 教科 书 上 看 到 更 加 
详细 的 线性 变换 的 几何 理论 和 代数 理论 . 


C. 特征 值 和 特征 向 量 


一 个 复数 和 被 称 为 矩阵 4 的 特征 值 , 如 果 存 在 一 个 向 量 zt 关 0 使 得 Ax(" = 
Aw("). 如 果 入 是 4 的 一 个 特征 值 , 我 们 把 满足 方程 Ax = Xz 的 所 有 向 量 集 记 为 
MN, 且 把 它 称 为 4 对 应 于 特征 值 和 的 右 特征 流 形 , 把 钢 、 中 的 向 量 称 为 对 应 于 入 
的 右 特 征 向 量 . 显然 , 对 任意 的 y,z € 叫 \, 有 ay 十 bz € 其 其 中 ab 为 任意 常数 . 
Mm、 的 维 数 被 称 为 入 的 几何 重 数 . 

如 果 钢 1, M2,… ,WM 是 算 子 4 互 不 相同 的 特征 流 形 , 且 pj,…, wp; 是 分 别 属 
于 ,M2,… ,i 的 任意 非 零 向 量 , 那么 pj,…, wp; 是 线性 无 关 的 . 事实 上 , 反之 ， 
假设 m 是 我 们 能 够 找到 的 最 小 整数 , 使 得 1, 9%,…, 互 异 , 则 存在 非 零 向 量 
p1 EM po € Mo, pm € Mm, A 和 韭 零 常数 c1,.… ,cm 使 得 cip1 十 … 十 cmpm = 
0. 一 般 地 , m > 2. 算 子 4 作用 到 上 式 两 边 , 可 以 得 到 和 lcigp1 十 … 十 和 Amcmpm = 0, 其 
中 入 ;为 对 应 于 特征 流 形 0; 的 特征 值 . 如 果 入 ; 中 有 一 个 为 零 , 我 们 得 到 (m 一 1) 个 线 
性 无 关 元 素 , 这 与 m 的 定义 相 了 矛盾 . 因此 , Xi 夭 0; 用 和 乘 以 capl+…+cmen =0 
之 后 再 与 和 cigp1 十 … 二 Amcnem = 0 相 减 , 我 们 有 


(2 一 和 Al jco2。 十 … 十 (Am ~ 和 Al )cmp = 0. 


这 又 与 定义 的 最 小 m 相 政 盾 . 假设 m1, 2,.…,3: 是 A 的 互 为 相 异 的 特征 流 形 
而 县 pe, pH 是 Ji 的 一 组 基 ， 2 一 7 那么 


1 2 rT 
pi 多， pp pi 记 ph) 


ee -im 


me he 时 本 了 Na Mk i 


had wm pk Rd 
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构成 一 个 线性 无 关 组 . 因此 , 4 只 有 有 限 个 特征 值 和 特征 流 形 . 在 特征 流 形 维 数 的 
和 为 n 的 条 件 下 , 我 们 可 以 得 到 完全 由 特征 癌 量 构成 的 一 组 基 (对 于 全 空间 ), 具有 
这 种 特性 的 矩阵 被 称 为 可 对 角 化 矩阵 . 

我 们 同样 可 以 用 方程 vz4 = 和 z 替代 4z = Az. 同 理 , 满足 z4 = Az 的 入 值 有 
一 个 非 平凡 解 , 它 正 好 是 4 的 特征 值 (已 在 前 面 段落 定义 ). 进一步 , 满足 z4 = 》Xz 
的 所 有 向 量 ( 即 左 特征 向 量 ) 形成 的 流 形 的 维 数 也 正 是 和 的 重 数 (读者 可 以 证 明 这 一 
结论 ). 和 前 面 一 样 , 由 不 同 特征 值 的 左 特征 癌 量 构成 的 集合 是 线性 无 关 的 . 

众所周知 , 4 的 特征 值 正好 是 n 次 代数 方程 det ||4 一 AT = 0 的 根 . 因此 , 根 
据 行 列 式 性 质 , 有 一 个 结果 下 面 将 要 用 到 : 如 果 A = | 1 。 ) 其 中 41. A。 是 
方 阵 , 则 入 是 4 的 一 个 特征 值 当 且 仅 当 入 是 矩阵 4; 或 4 的 一 个 特征 值 . 事实 上 ,， 
因为 

det( 4 一 站) = det(A1 — AI)det(A, 一 和 了)， 

其 中 同样 的 记号 了 用 来 表示 不 同 维 数 的 单位 矩阵 这 个 结论 是 显然 的 . 
(a) 谱 表 示 

在 下 面 讨论 中 , 我 们 假设 4 是 实 和 矩阵 , 即 4 的 所 有 元 素 都 是 实数 . 假设 我 们 可 
以 用 矩阵 4 的 右 特 征 向 量 构 造 一 组 基 . 由 前 面 的 讨论 可 知 , 我 们 也 可 以 用 矩阵 4 
的 左 特 征 向 量 构造 一 组 基 ,， 另外 , 如果 4 的 元 素 ai; 都 是 实 的 , 我 们 可 以 选择 两 组 
正 交 基 , 即 p91,…, pn 和 和 …, 多 分别 是 由 右 特 征 向 量 和 左 特征 向 基 构 成 的 两 
组 基 , 而 且 当 1 守 = 了 时 (pb = 1, 当 i 关 j 时 (i, 如 ;) = 0. 为 了 证 明 具 有 这 些 性 


Hi(Y;, Ti) 一 (Lj js Ti) 一 (Yj;A, Ti) 一 (Wy; Ti 一 (yi MiTi) 一 Mi(Y;, Pi), 


因此 , 假如 jj 关 入, 则 一 定 有 (yj;, zi)=0. 注意 到 , 由 于 4 是 实 的 , 直接 可 以 推 得 ， 
当 4z = Xz 成 立时 , FB = XE 也 成 立 , 其 中 到 = (31,… ,Fn). 所 以 , 我 们 得 到 4 的 
特征 值 互 为 共 斩 且 成 对 出 现 , 并 且 和 与 入 有 相同 的 重 数 . 设 4 的 特征 值 是 


入 1 ， 和 Al ， M2, A2, “0 和 AT) 和 Ar， Art+l; Ar 二 2) Am, 


其 中 AN 和 是 复数 ， X+ ,和 Am 是 实数 .我 们 分 别 用 01, 3R1,… ,9 员 ;， 
M1,"… ,了 tm 表示 相应 的 右 特征 流 形 ， 用 8&1, 人 1,… 2, 7, r+41,… ,Lm 表示 相 
应 的 左 特征 流 形 . 

现在 , 我 们 已 经 证 明 中 中 的 每 个 向 量 正 交 于 右 特 征 流 形 中 除了 哎 ! 的 每 个 向 
基 , 并 且 (类 似 地 ) 正 交 于 其 他 的 左 特征 流 形 中 的 每 个 向 量 . 因此 , 我 们 的 任务 是 选 
择 & 中 的 一 组 基 网 ,Up 以 及 MM! 中 的 一 组 基 P1,'…, Pa, 使 得 当 i = j 时 
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(i, Pj) = | 当 1 a 时 (pi, Pp;) = 0, 其 中 d 为 和 Ai 的 重 数 ， 类 似 地 ， 对 Li, mM, 
£2, Wz 做 相同 的 处 理 . 为 此 , 任 取 喘 ; 中 的 一 组 基 gp1,…, a, 以 及 & 中 的 一 组 基 
Vi, ,Ya: 我 们 希望 能 找到 一 组 常数 C13 Cd 使 得 yi = C1Yi 十 '… 二 Caya; 并 是 
满足 条 件 (1,p1) = 1 和 (1, i;) = 0, i = 2,…,d; 因此 , 我们 希望 它们 满足 如 下 
方程 组 

cl P1) + Cc2(Y2; P1) + + Calya, P1) = 1, 

c1(¥Y1, P2) + c2(Y2, Pp2) + + calYa, P2) = 0, 


ci1(¥Y1 Pa) 十 C2(Y2, pa) 十 … 二 ca(Ya; Pa) = . 


假设 这 个 关于 c1,… ,ca 的 方程 组 无 解 . 这 意味 着 (1,0,…,0) 无 法 表示 成 d 个 问 
量 f1 = (yi; P10, (YPa) ,fa = 二 (Ya; 81),…, (Yay Pa)) 的 线性 组 合 . 所 以 ， 
f1,…, fa 是 线性 相关 的 . 因此 , 存在 一 组 不 全 为 零 的 常数 a1,.… ,aa 使 得 a1 fi 十 
… 十 agafa = 0. 这 导致 方程 


(ai 十 十 adgyd Pi) = 0,1= 1,...d. 


成 立 . 但 是 , 这 证 明了 向 量 组 y1,… ,ya( 包 括 y; 的 任意 线性 组 合 ) 正 交 于 右 特 征 流 
形 中 (除了 贷 i) 的 任 一 向 量 . 现在 , 已 知 a1y1 十 … 十 aaya 正 交 于 任意 右 特征 向 量 以 
及 任意 右 特征 问 量 的 线性 组 合 . 但 是 , 根据 假设 , 存在 由 右 特征 向 量 构 成 的 一 组 基 ， 
使 得 a1yi 十 … 十 aaya 正 交 与 它 本 身 , 因此 a1yi 十 …: 十 aaya = 0. 这 与 yj,… ,Wa 线 
性 无 关 相 矛盾 . 因此 , 存在 满足 条 件 的 外 1. 我 们 用 同样 的 方法 构造 多 p，… ,wa. 我 
们 仍 须 证 明 多 ，… ,us 是 线性 无 关 的 . 假设 a1pi 十 … 十 aawba = 0, 则 


0 三 (ai 十 … 十 Ga 人 pa, Pp1) 一 Q1 
0= (a1pi1 + + Qatba, Pp2) = 02 


0= (al 十 ，，， 十 aas Pa) 一 Cd 


所 以 ， 1) “7 ,Dy 是 线性 无 关 的 . 


众所周知 , 如 果 4 是 一 个 实 和 矩阵 , 并 且 它 的 右 (或 左 ) 特征 向 量 可 以 作为 全 空 
间 的 一 组 基 , 我 们 可 以 取 右 特征 问 量 构成 的 一 组 基 pl …… pn 以 及 左 特 征 向 量 构成 
的 一 组 基 1,… ,区 使 得 它们 是 相互 双 正 交 的 , 即 满足 当 i = 了 时 , (Wi, gj) = 1 
当 i 关 j 了 时 ， (pi, pi) = 0. 

我 们 可 以 运用 这 个 结论 展开 和 窍 阵 4 的 典型 表示 , 即 所 谓 矩阵 的 谱 表示 ， 假设 
和 1,…, 和 An 是 对 应 于 特征 癌 量 p1,… ,pn 的 右 特 征 值 ， 即 分 别 使 得 4p; = 入 ip; 


i 
ER 
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? 三 1,..…,n, 其 中 Ai 不 必 互 异 . 令 


Pp; 二 (pi , Pin), wi; = (pil , Win), 
P11 :°° Pnl pil Yin 
P1n Pnn Ynl Ynn 

Al 0 0 

0 A» 0 
A= z 

0 0 入 


因为 pi ,Pn 入 是 双 正 交 的 ， 所 以 VP = 了 其 中 了 是 单位 矩阵 . 
进一步 ， 我 们 可 以 直接 计算 得 $A Wp, 一 Mipi) ? 一 1 … 了. 因为 Ap; 一 Aipi) 
i 一 1,…,n, 并 且 wi 是 全 空间 的 一 组 基 , 故 有 


A= $AVH BE =T. 


由 此 可 得 , A™ = $AVSAV... SAV = $A" 亚 , 其 中 


Am 0 ... 0 
Am | 0 Mn ... 0 
0 0 |... nm 


nt 


所 以 , 如 果 和 矩阵 4 的 谱 表示 是 已 知 的 , 则 47 是 相对 容易 计算 的 . 
(b) 收敛 
我 们 逢 要 建立 向 量 序 列 和 矩阵 序列 收敛 的 概念 - 
给 定 n 维 空 间 中 的 一 个 向 量 序 列 zz 人 称 该 序列 收敛 于 x 中 , 如 果 


0) (0) ;1 


lim zx; 三 Ti ,1 = 1,..,n. 


了 一 oo 


lim oi? 一 Qi 人 一 1],...,n. 


由 此 定义 ,我 们 可 以 得 到 , 如 果 im 4 = 4 以 及 lim w0) = z0), 那么 
lim AzW) = 4 z(0)， 进 一 步 , 如 果 存在 矩阵 4@) 以 及 全 空间 的 一 组 基 z()， 
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lim 4 一 Am 的 一 1 
太一 oo 


那么 , 就 有 lim 4” = 4"， 事实 上 , 对 任意 y = clz0) 十 .… 十 cnz()， 都 有 
一 DO 

jlim AWy = AMy, 因为 z0),z,， zf) 是 全 空间 的 一 组 基 

+0O0 


D. 正定 矩阵 
一 个 x n 阶 的 实 和 矩阵 4 = (az) 是 正定 的 , 如 果 》 aijziz; > 0, 除非 每 个 


i 
Ti 二 0. 在 大 多 数 情 况 , 我 们 只 考虑 对 称 的 正定 阵 , 即 ai = ai 
一 个 实 对 称 的 正定 阵 是 非 奇 蜡 的 , 并 且 其 所 有 特征 值 都 是 正 的 . 每 个 这 种 矩阵 
都 有 一 个 “平方 根 , 即 存在 一 个 非 奇 异 的 实 和 矩阵 P = (psj), 使 得 4 = 已 P . 这 里 ， 
忆 表示 和 拖 阵 P 的 转 置 , 其 元 素 28 = pyji. 


A.2 正定 矩阵 的 Frobenius 理论 


正和 矩阵 的 Frobenius 理论 大 量 地 应 用 于 概率 论 中 , 特别 是 在 马尔 可 夫 转 移 窍 阵 
的 分 析 中 . 我 们 给 出 该 理论 在 下 面 儿 个 方面 的 应 用 . 
预备 知识 

假设 A = (aij)(i,7 = 1,…,n) 是 一 个 方 阵 . 如 果 每 个 ai; 都 是 非 负 的 , 我 们 记 
4>0i 如 果 4>0, 且 至 少 存在 一 个 aij > 0, 则 我 们 记 4 > 0, 并 且 称 4 是 正 拢 
阵 ; 如 果 每 个 a;; 都 是 正 的 , 我 们 记 4 屿 0. 对 于 癌 量 z = (7z1,… ,zn), 我 们 引入 
相间 的 记 与 , 即 当 zi > 0(i = 1,…,n) 时 , 记 2 之 0; 当 w > 0 并且 至 少 存在 一 个 
Ti>>0 时 , 记 T>0; 当 zi> 0G=1,…,n) 时 , 记 ww > 0. 同样 地 , 当 有 “一 y>0 
时 , 记 z > yy, 等 等 . 显然 , 若 A4>0 且 zz>y, 则 Az > Ay, 若 入 沁 0 且 z >y, 有 
Az > Ay. 

令 4>0, 且 人 A 是 由 所 有 对 应 于 向 量 z = (zi……zn) 的 实数 入 构成 的 集合 ， 
使 得 


Ti = 1， >0, 有 HH 4z> Mx. 
4 一 上 
令 Xo=supAX; 则 和 0 是 有 限 的 , 而 且 容 易 证 明 ， 如 果 4 > 0， 则 Xo 是 正 的 . 事实 上 ， 
如 果 M = maxlxiisnaii 则 由 Ti 二 1 日 x >0 可 椎 得 aijZj <M 》 7 =M, 
i 二 1 j=1 j=1 
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-~ 1 
2Z>0, 则 0<5=minisij<no1, 且 y oil(-=) > 6,1=1,…,n, 从 而 和 Ao > 6n. 
7 一] 


假设 对 于 一 个 违 阵 4 > 0, 我 们 有 和 Ao = 0 如果 zz 六 0 由 和》 =0 可 知 ， 
4z >> 0 是 不 成 立 的 . 因为 对 某 个 x > 0, Azx = 0, 则 要 求 4 = 0. 于 是 , 存在 某 个 
ZX 之 0, 使 得 Az> 0. 令 Ci 为 4z 正 元 素 的 指标 集 , 显然 Ci 不 依赖 于 xz 沁 0 的 选 
择 . 令 9 = (人 名)>0, 使 得 奇 iE Oi, 则 yi>0, 基 igi, 则 w=0, 且 定义 C。 
为 Ay 下 元素 的 指标 集 . 同样 地 , C2 也 不 依赖 于 y 的 选取 , 且 C2 S Cl. 因为 和 0=0， 
我 们 可 得 C2 关 C1. 按照 这 样 的 方法 继续 下 去 , 我 们 可 以 找到 


C1 DC DD..D Cm 一 m+1 三 *… 二 0, 


这 个 结论 是 恰当 的 . 现在 , 我 们 可 以 得 到 4” = 0. 事实 上 , 显然 对 任意 的 z > 0， 
都 有 A™"z = 0, 因为 每 个 向 量 都 可 以 写成 两 个 严格 正 向 量 的 差 , 对 任意 xz, 都 有 
A™”z =0, 这 等 价 于 A”=0. 

Frobenius 第 一 定理 ”现在 , 我 们 将 证 明 Frobenius 第 一 定理 . 

定理 2.1 如果 4 交 0, 风 

(a) 存在 2? 六 0, 使 得 4z = Xoz0; 

(b) 如 果 入 关 和 0 是 4 的 任 一 其 他 特征 值 , 则 | 和 | < Xo; 

(c) 4 的 特征 值 和 o 的 右 特征 向 量 形成 一 个 一 维 子 空间 , 即 dim Ms、 = 1. 


证 明 (a) 由 Ag 的 定义 ， 存在 一 列 YY2 A0， 且 存 在 一 列 阿 量 了 人 7(2), 本 


使 得 
zO > 0,4zG > qr r+ = 1 (A.2.1) 


由 于 所 有 zt 的 坐标 都 落 在 区 间 [0, 1] 内 , 我 们 可 以 通过 对 角 化 得 到 一 列 正 整 数 
nN] < 2 < Ns <i, 和 一 个 回 基 zt) 一 (zi )， 其 中 zr < [0， 1], (7 一 
1,2,: )， 使 得 


0 


im ztnz) 一 Z0， 
一 全 OO 


7 = 1,..…,n. (A.2.2) 


4 


由 (A.2.1) 可 以 得 到 2 十 … 十 29 = 1, 且 x9 > 0. 如果 用 n; 代替 (A.2.1) 第 二 
个 不 等 式 中 的 i, 令 j- co, 则 4z > Xoz0. 因此 ,有 Ax? = Xoz0, 否则 4z0 > Xoz0. 
将 4 作用 于 上 个 不 等 式 的 两 边 , 注意 到 A 泡 0, 令 yo= 4z0. 则 有 480 光 Xozo 日 
y" 沁 0. 因此 , 对 于 充分 小 的 < > 0, 则 有 Ay? 六 (Xo +s)y0, 用 适当 的 正 数 乘 以 yo， 
使 得 它 的 各 个 坐标 的 和 都 等 于 1, 所 以 (Xo + es) e A, 这 与 和 0 的 定义 相 矛 盾 . 因此 ， 
4z = Xoz0. 由 于 zo>0 且 4 六 0, 我 们 得 到 Xoz0 六 0, 或 者 z0 > 0, 这 就 证 明 
了 (a). 
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(b) 假设 入 关 X 且 4z = Xz, 其 中 z 关 0. 4z = Az 的 坐标 形式 为 
Sa 一 AZi, ? 一 ] 了。 
两 边 同时 取 绝 对 值 , 因为 a1; > 0, 再 利用 和 的 绝对 值 不 会 超过 绝对 值 的 和 , 则 有 


nn 
ai 好 | 之 [A||zil, ? = 1,.…,n, 
7 一 ! 
印 
Alz| 之 |Allz|， 其 中 |z| = (|z3|,…, |zn). 


用 适当 的 正常 数 乘 以 |z|, 使 得 它 的 各 个 坐标 的 和 等 于 1( 义 z 冯 0)， 几 IAl e A, 因 
此 , 由 Xo 的 定义 可 知 , | 和 | < Xo. 为 了 证 明 | 和 A| < Xo, 考虑 矩阵 4A; = A 一 67, 这 里 的 
I 是 单位 矩阵 , 取 6 充分 小 , 使 得 45 六 0. 因为 和 是 和 大 人 和 则 Ao 一 6 
是 hs 的 最 大 正 特征 值 . 

类 似 地 , 对 于 | 和 | < Xo, 用 45 和 入 一 6 分 别 代 蔡 上 述 结论 中 的 4 和 入 得 到 
和 一 上 | < 和 0 一 6. 但 是 


A =|AA-6+6<|A-6+6 < No, 


所 以 , | 和 | = 和 o 意味 着 | 和 | = | 入 一 引 十 6, 这 就 要 求 和 为 正 实数 . 因此 , 入 = | 和 A| = 》Xo， 
这 与 假设 和 关 Xo 相 矛 盾 . 

(c) 假设 Ay = Aoy 且 不 存在 常数 c 使 得 y = cx". 由 于 4 是 实 矩 阵 , 辣 量 4,v 
的 坐标 分 别 由 实数 和 虚数 部 分 组 成 , y 的 坐标 是 4 的 特征 值 Ao 所 对 应 的 特征 向 量 ， 
且 对 于 任意 的 c 都 有 2 头 cz0, 则 w,wv 至 少 有 一 个 不 是 cw? 的 形式 . 这 样 , 我 们 首 
先 不 妨 设 y 是 实 的 . 因为 z0 六 0, 取 适 当 的 j, 如 令 lp = miny,z0 {z8/inil}, 使 得 
z0 一 jy > 0, 但 不 是 交 0; 但 是 , 4(z80 一 jy) = Xo(e 一 py), 正如 (a) 的 证 明 , 必 有 
(z0 一 Jy) > 0, 这 与 上 的 选择 相 牙 盾 . 本 

我 们 再 来 看 一 些 简 单 的 结论 . 如 果 4 六 0, 则 存在 向 量 f° 六 0 使 得 站 4 = 
Mof0, 且 与 Xo 相对 应 的 左 特 征 向 量 的 流 形 是 一 维 的 . 为 此 , 令 X = supw X 其 中 

= {和 If A > 和 Ff, 了 > 0}, 正 如 定理 2.1 的 证 明 , 可 知 存在 f° 六 0 使 得 产 4 = 入 f"， 

若 和 是 不 等 于 入 的 特征 值 , 则 | < X, 且 与 入 相对 应 的 左 特征 向 量 的 流 形 是 一 维 
的 . 这 就 意味 着 , 若 Ao 六, 则 |Xo| < 入 ,因为 Xo 是 4 的 特征 值 . 但 是 , 定理 2.1 指 
出 , 如 果 特 征 值 入 关 Xo, 则 | 入 | < 和 0. 因此 , 和 = 和 0. 

定理 2.2 ”如 果 4 > 0, 且 对 于 某 些 整数 m > 0, A4” > 0, 则 上 述 定 理 仍 然 成 
Y. 
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证 明 ”如 定理 2.1 的 证 明 , 我 们 可 以 找到 z0 > 0 使 得 4z' > Moz ， 如果 
4rz0 和 Xoz0, 则 4z0 > Xoz0. 将 4m 作用 于 两 边 , 得 到 47 zw? > A0A™"z? 和 
y 二 4mz0 六 0. 因此 , 4y 六 Xoy 根据 定理 2.1 的 证 明 , 这 与 Xo 的 定义 相 蔬 盾 ; 
因此 , 4z90 = Xoz0. 将 4 连续 作用 于 4z0 = Mow? 的 两 边 , 得 到 47m = 和 
因为 4" 泡 0, x0 > 0, 所 以 X20 六 0, 从 而 2? 守 0， 因 为 定理 2.1(b) 证 明了 
AS 和 No 只 须 4 > 0. 假设 | 和 | = 和 0, 上 且 对 某 个 z 关 0 有 Az = Xz, 则 A™z = A 和 "mz， 
4maz0 = 和 Fz0, 且 | 和 A™| = 和 .如 果 我 们 知道 , 8? 是 4” 的 最 大 正 特 征 值 , 其 证 明 
与 定理 2.1 的 证 明 类 似 . 因为 A4” > 0, 由 定理 2.1 可 知 A4” 有 一 个 最 大 的 正 特征 
值 , 且 对 应 的 特征 向 量 的 所 有 坐标 都 是 正 的 . 因此 , 奇 多 不 是 4” 的 最 大 正 特 征 
值 , 则 4” 有 两 个 正 的 特征 值 Xi > 》Xa 且 相 应 的 特征 向 量 zl, zs > 0. 但 这 是 不 可 
能 的 ; 事实 上 , 令 1 > 0 使 得 zs 一 wzw1i > 0 但 不 是 六 0, 则 4 (zs 一 jz1) 污 0. 男 
一 方面 , A (x2 一 p21) = M2z2 一 JAR = A2(T2 一 21) 一 (A 一 和 2)jpzi. 因为 第 一 项 
不 是 六 0, 而 第 二 项 是 六 0, 于 是 得 出 矛盾 . (c) 的 证 明 与 定理 2.1(c) 是 一 样 的 , 只 
要 注意 到 4 的 任意 特征 向 量 是 A4” 的 一 个 特征 向 量 . 图 

为 了 进一步 研究 矩阵 4 > 0, 且 对 于 某 些 整数 m > 0, 使 得 4” 六 0, 我 们 引入 
一 个 秩 为 1 的 矩阵 , 其 形式 为 


P= ||zifill 


这 里 , z? 同上 ， f° 光 0 满足 f°4 = 和 of°, 且 乘 以 适当 的 因子 使 其 正则 化 , 得 
》 ,zf0 =1. 则 有 以 下 性 质 ， 


1=1 

(i) 对 于 任意 的 向 量 z, f, Pz = (z, )z0, fP = (fxz0)f ,特别 地 , Px? = z0 

了 P=f. 

(i) P* =P. 

Gi) 4P = PA= NP. 
通过 直接 计算 便 可 证 明 前 两 个 结论 ; 对 于 第 三 个 结论 , 我 们 知道 对 于 任意 的 问 量 z， 
都 有 

APz = A(x, f°)x° = (op 六 )4z0 = (x, f° N07 = XoPrz， 


所 以 AP = AoP; 类 似 地 , 有 JP4 = fhoP, 这 就 意味 着 PA = 和 oP. 
现在 , 我 们 引用 以 下 事实 (不 予 证 明 ): 设 B 是 一 个 ( 方 ) 阵 , 令 B" = | 下, 且 


/0 
7 = max lim ylbi |. 


则 有 一 个 特征 值 入 , 使 得 | 和 *| = 看 入 是 吾 的 任意 其 他 特征 什 , 则 |A| < 7x. 通 
常 , 7 被 称 为 B 的 谱 半径 . 现在 , 我 们 在 此 基础 上 证 明 下 面 的 定理 . 


4 
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定理 2.3 在 4>0, 且 存在 其 一 整数 mm > 0 使 A” >>0, 和 和 PP 如 上 定义 ， 
出 
二 4 一 P, (7 一 00). 
证 明 我们 可 以 断言 , 大 入 是 气 阵 号 =4- 和 XoP 的 特征 值 , 则 | 和 | < Xo. 事实 
上 , 假定 存在 问 量 xz 夭 0 使 得 Bz = Xz, 于 是 : 


MAPz = PBz = P(A — MP)z= (MP -MP’)z = NP P)z=0, 


因此 , 由 Bz = Az 可 推 得 Az = Az. 由 定理 2.2 可 知 , 入 = Xo 或 者 | 和 | < Xo. 若 
入 二 Xo, 则 4z = Xoz, 从 而 z 是 zo 的 倍数 . 但 是 , 如 上 所 述 , 和 Pz = Az 头 0 是 不 可 
能 的 . 故 窍 阵 B 的 谱 半 径 7 满足 : + < Xo. 

令 p 满足 :7 <p < 和 0o, 因为 


r 二 im yax bs? | <p, 
对 于 充分 大 的 n, 有 max ax bi < p". 利用 书 的 性 质 (i - (iii), 由 归纳 法 易 证 
B™ = A™—AmP 
或 者 
A™ _B”™ 
六 
因为 对 于 充分 大 的 mw 有 四 ax bi7 | < p", 所 以 


+P. 


从 而 , B™ /和 ™ 一 0. 图 
Frobenius 第 二 定理 ”下面 是 一 个 主要 的 Frobenius 定理 . 
定理 2.4 设 4>0, 且 和》 如 定理 2.1 所 定义 . 则 
(a) ho 是 4 的 特征 值 , 具有 一 个 特征 向 量 z > 0; 
(b) 若是 A 的 任意 其 他 特征 信 , 则 A < Ai 
(0) 当 丰 六 0 时 志和 收 伊 ， 


(d) 若 和 是 4 的 特征 值 是 = Ao, 则 7 = 入 /Xo 是 一 个 单位 根 , 昌 mxXo 是 4 
的 一 个 特征 值 , 其 中 m = 0, 1,2,3,- 
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证 明 (a) 令 互 是 元 素 全 为 1 的 矩阵 , 故 对 一 切 6 > 0, 有 A+65E 沁 0. 令 
0 < 51 < 62, 选择 z = (x1,…,zn) > 0, 使 满足 》 zi = 1 由 (A 和 A+6E)x > A 可 


4 一 并 
推 得 
(4 十 0 五 )Z = (A+ OE)T + (02 — 0) Ex > {A+ (02 一 91 )]z. 


因此 , 若 Xo(6) 是 对 应 于 矩阵 和 4 十 5E 的 和 o 值 , 可 推 知 Xo(6) 是 关于 6 的 网 增 函 
数 . 注意 到 , 和 0(0) 是 对 应 于 4 本 身 的 和 o 值 . 根据 定理 2.1, 存在 一 个 正规 化 的 向 量 
Z(0) > 0, >》 zi(g) 二 1, 且 满 足 ， 


(4 十 6 五 )p(0) = Xo(0)zZ(6). 


令 > 5 > … 为 一 收敛 于 0 的 正 项 序列 . 根据 定理 2.1 的 证 明 , 我 们 可 找到 

数 m,n2,…, 使 得 ，lim z(6n,) 一 0, 其 中 向 量 2? > 0 满足 > zi = 1， 显然 
?一 二 

A 和 A+6n, 忆 一 A 且 No(6n,) 一 和 > 和 0. 因为 


(A+6n, BE)r(6n,) = MN(6n, ) rT(6n,), 


令 j 一 00 可 知 , 4z = 入 x". 但 根据 定理 2.1(b) 所 证 明 的 Xo 的 性 质 , 知 Xo 入 '; 
故 Xo = 入, 即 (a) 得 证 . 

(b) 的 证 明 等 同 于 4 六 0 的 情况 . 
”对 于 (c) 和 (d) 的 证 明 , 显然 , 不 失 一 般 性 地 , 可 以 假设 Xo = 1, 否则 我 们 可 以 
把 4 中 的 每 一 个 元 素 都 除 以 和 0o. 
(c) 因为 4x" = z0, 所 以 47"z0 = z0. 把 这 个 等 式 依 分 量 展 开 , 易 得 
0 


max T; 
0 < (rm) < 一 


ij ~ 


min zi 
故 4” 的 元 素 是 一 致 有 界 的 ， 

令 了 工 ={zlhz=z 和 天 ={1 存 在 ,使 y=( 人 -4)z}, 即 二 是 4 的 固定 
点 的 线性 空间 , 五 是 矩阵 了 一 4 的 列 的 线性 空间 . 另外 , 定义 
A+A+::+A” 
加 m 


易 见 , 工 是 一 个 闭 线性 空间 , 从 而 对 每 一 个 ze 了, 成 立 


Sm 


_AtA T+.+A™ 
rn 


SmT 


二 
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所 以 ，lim Smz = z. 我 们 将 要 证 明 ， 对 任 一 个 ze K, Smz 同样 收敛 , 而 且 ” 维 
向 量 空间 中 的 每 一 个 向 量 x 都 属于 L@ K (空间 工 与 K 的 直 和 ). 即 (c) 得 证 . 

可 断言 , 对 每 一 个 ye K，lim Smy = 0， 事 实 上 , 因为 存在 某 个 x, 可 使 

= (I 一 4)z, 则 推 知 
Ay+ AYy+:.…+ ATy AzT — A™iiz 
7 7, 

又 由 于 4” 的 元 素 是 一 致 有 界 的 , 故 当 m 一 co 时 , Smy 一 0. 

为 了 证 明 任 意向 量 z 是 工 和 KK 中 的 辣 量 之 和 . 考虑 ， 


和 my 三 


Z 一 (2 一 Sn) 十 SmnD 一 2 十 2m 


因为 A™ 的 元 素 是 一 至 有 界 的 ， 所 以 y,, 和 zm 的 元 素 也 是 有 界 的 . 故 存在 一 正 束 
数 序列 mi < m2 <…, 和 一 向 量 z*, 使 得 


tT—+ OO 


因为 十 1 
Zm, 一 从 ZzZm, 一 A-A 。 — 0, (1 一 00), 
Ws 
我 们 有 
z0 = lim zm = lim Aznm, = A lim zm, = Az0, 
间 且 之 0 七 L. 
同样 地 ， 
Ym = Snz= 二 (zc-4z)+(z- 42z) 二 .二 (z 一 4mz)] 
2 (Im (I+A+A’ T 十 4 十 十 4 一 ) 了 
= 人 (一 4 元 + + 7 + + m | 


故 ye K. 因为 K 是 闭 的 线性 子 空间 , y, 的 元 素 是 一 致 有 界 的 , 所 以 当 i 一 oo 
时 ,有 Yn 一 2 一 zo€EK. 因此 , x = (2 ~ z0) + zo, 其 中 一 zo EK,zo EL, 证 毕 . 

(d) 可 知 存在 向 量 19 > 0, 满足 产 4 = 用. 首先 假设 了 > 0. 如 果 入 天 1， 
和 |= 1, 且 存 在 z 关 0, 使 得 4z = 和 Az, 则 


了 


Ci7 山 7 一 ATi,? 一 1 2， ,多 
j=1 


所 以 > 
》 aijlzj| > |zil 或 Alz| > |z| 


j=1 


上 
四 | 
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但 若 4jzl > |zl, 则 (了 ,|z|) < (7",Alzl) = (f°4,|z|) = (了 ,|zl), 这 将 错误 导致 
4ilz| = |z|. 因此 


TY Tt 
y oaloil= i = | > ous; i = 1,2,..…,n 
j=1 


j=1 
故 存在 常数 jv1,…, Jn, lui| = 1, 满足 : 
(*) QijTi = Qij [Tj (Vi, 7) 


设 z .2 表示 向 量 (wi,… ,znyn). 将 前 面 的 关系 式 (*) 乘 以 后 ( 即 pj 的 7 次 酸 )， 
然后 对 下 标 j 求 和 , 可 得 : 


A(z :1") = 4(zl pr) 
同时 , 上 式 *) 对 下 标 i 求 和 , 可 得 : 


由 此 可 得 
MT = 4 zl. 


因此 
AZ) 三 AAA )= AN: A(zT. WT) r= 1,2,.., 


由 此 递归 式 可 推 得 : A(z .jp") = 和 Ti(p 2). 故 入 是 和 和 的 特征 值 ,7 = 1,2,:…. 因 
为 A 的 特征 值 的 个 数 是 有 限 的 , 所 以 入 必 为 单位 根 . 
现 假设 f” > 0 而 不 满足 f° 交 0. 如 果 必 要 的 话 , 通过 重新 排列 4 的 行 与 列 ， 
可 以 假设 f° 一 (f° ,8 ,0,.….,0), 其 中 fi > 0,4 = 1,...,7. 因为 A>D0, 由 关系 
式 太 4= 了 可 写 出 分 块 阵 
4-( 和 名。 ) 
B A 


其 中 4] 是 一 个 > xy 阶 矩 阵 , 而 42 是 一 个 (ni 一 7) x (n 一 7) 阶 和 矩阵 ,而且 问 量 
(f9,…,f9) 是 41 的 左 特征 向 量 , 相应 的 特征 值 为 1. 令 和 是 4 的 特征 值 . 如 果 和 
同时 也 是 41 的 一 个 特征 值 , 那么 用 41 替换 4, 我 们 又 回 到 了 原来 考虑 的 问题 中 . 
如 果 入 不 是 4i 的 特征 值 , 那么 它 必 是 4 的 特征 值 . 但 42 的 特征 值 一 定 是 4 的 
特征 值 , 且 绝 对 值 不 超过 1. 同时 , 因为 A。 > 0, 故 它 有 一 个 最 大 的 正 特 征 值 , 即 所 
有 特征 值 的 绝对 值 的 上 界 . 由 于 |A| = 1, 42 最 大 的 正 特征 值 正 是 1. 显然 , 我 们 可 


和 
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以 对 42 应 用 前 面 的 分 析 . 因此 它 或 者 有 一 个 左 特征 向 量 > 0, 其 相应 的 特征 值 为 
1, 或 者 它 会 有 如 下 形式 (可 适当 重 排行 与 列 ): 


只 要 有 限 步 地 重复 这 一 过 程 , 我 们 可 以 将 问题 简化 为 存在 一 个 左 特征 向 量 0， 
对 应 特征 值 为 1 的 情况. 


图 
下 面 的 推论 将 产生 一 些 关于 正 矩 阵 4 的 谱 半 径 Xo(4) 的 有 用 信息 . 第 一 个 推 
论 只 是 定理 2.4 中 结论 (a) 和 (b) 的 简单 重 述 . 

推论 2.1 


车 4 > 0, 则 A 的 最 大 特征 值 和 Ao = Xo(4) 是 实 非 负 的 , 而 且 可 以 
表示 成 No = maxa 入 , 其 中 
A = {MAz > Xz, 存在 z> 0}. 
推论 2.2 若 4>0, 且 存在 z0 交 0 使 得 4z < jx?, 则 4 是 和 No(4) 的 一 个 
上 弄 . 


证 明 将 4 乘 到 4z90 < yw? 的 两 边 , 我 们 得 到 4?z0 < 4z ”< jx, 重复 
这 一 步骤 可 得 


nm0 < uit ad 


n = 1,2,.. 
由 此 易 得 
om 
“pn 
人 min Ze 
全 
所 以 
No(4) = Tv/maxlag| <r. 加 
和 一 OO 7 
推论 2.3 若 4>B>0, 则 和 0(B) < Xo(4). 


A 
证 明 可 由 推论 2.1 推 得 , 或 者 由 关系 式 


(一 本 VS 人 > lin, Ym = hlB) 


显然 , 由 A > B>0, 可 推 得 4 > B” >0,n=1,2,.…. 


索 5| 


索引 中 页 码 为 英文 原 书页 码 , 与 书 中 贝 边 标注 的 由 码 一 致 ， 


A 


Abei's iemma( 阿 贝尔 引 理 )，64 
Absorption, mean time until( 吸 收 时 间 和 平均 时 
间 ) 
in a birth and death process{( 生 灭 过 程 的 )， 
149 
in a Markov chain( 马 尔 可 夫 链 的 )，112 
Absorption, probability of( 吸 收 概率 ) 
in a birth and death process( 生 灭 过 程 的 )， 
145 
in a Markov chain( 马 尔 可 夫 链 的 )，89 
Accessible state( 可 到 达 状 态 )，59 
Age process, see also Current life limiting 
distribution of( 年 龄 过 程 , 见 当 前 寿命 的 极限 分 
布 ), 236 
as a Markov process( 马 尔 可 夫 过 程 )，232 
Age replacement, see Replacement models( 年 
龄 置换 , 见 置换 模型 ) 
Aperiodic Markov chains( 非 周期 马尔 可 夫 链 )， 
62 
Arithmetic distribution( 算 术 分 布 ),， 190 
Autocorrelation function( 目 相关 函数 )， 
444 
Autoregressive process( 自 回归 过 程 ), 455-461,， 
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B 


Backward Kolmogorov differential equation( 向 
后 科 尔 莫 龙 罗 夫 微分 方程 ), 135, 416 

Backward martingales, see Martingales( 问 后 
软 、 卖 ) 

Basic renewal theorem( 基 本 更 新 定理 ), 191 

Bessel process{( 贝 塞 耳 过 程 ), 367, 385, 389 

Beta distribution(Beta 分 布 ), 15 

Beta integral(Beta 积分 ), 36 


Binomial distribution( 二 项 分 布 ), 16 
Birth and death processes( 生 灭 过 程 )，131--150 
with linear growth( 线 性 增长 ), 155, 162, 441 
linear growth with immigration( 迁 入 线性 增 
长 ), 137 
logistic process( 迎 辑 过 程 )、144 
martingale related to( 关 于 生 灭 过 程 的 黄 )， 
321-323，330 
mean time unti absorption( 到 达 吸 收 状态 的 
平均 时 间 ), 148 
probability of absorptiop( 暖 收 概率 )，145 
pure birth processes( 纯 生 过 程 ), 119-120, 158 
queues( 排 队 )，137 
telephone trunking model( 电 话 干 线 模型 ), 139 
Block replacement, see Replacement models( 块 
置换 , 见 置换 模型 ) 
Borel-Cantelli lemma(Borel-Cantelli 引 理 )，19 
Borel measurable(Borel 可 测 ), 301 
Borel sets(Borel 集 )}, 301 
Branching processes( 分 支 过 程 ), 54, 392-442 
in continuous time( 连 续 时 间 ), 412-416 
electron multipliers modeled as( 电 子 倍加 如 
模型 ), 392 
extinction probability( 绝 灭 概率 ), 376-400， 
4]16 
generating function relations{ 枉 函数 关系 式 )， 
394 
with immigration( 迁 入 ), 326, 427 
Kolmogorovy equations for( 科 尔 莫 龙 罗 夫 方 
程 ) 416 
martingales related to( 关 于 分 支 过 程 的 莉 )， 
242, 291, 400 
with multiple types( 复 合 型 ), 411-412 
neutron chain reaction modeled as( 中 子 链 反 
应 模型 ) 392 
pure death process( 绝 灭 过 程 ),400 
in random environments{( 随 机 环境 )，489 
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renewal equation of( 更 新 方程 ), 216 

split times in( 分 裂 时 间 ), 292 

Survival of family names( 族 姓 的 继承 )，393 

survival of mutant genes( 变 异 基因 的 存活 )， 
393 

with two types( 双 类 型 ), 424-431 

with variable lifetime( 可 变 寿 命 ), 431-436 

Brownian motion( 布 骨 运 动 ), 21-22, 28, 30， 

340-391 

absorbed at the origin( 被 原点 吸收 ), 354 

with dritt( 潜 移 )，355 

geometric( 儿 何 )，357，363，385 

martingales related to( 关 于 布朗 运动 的 蒜 )， 
320, 357-365, 389-390 

multidimensional Brownian motion{ 多 维 布 
朗 运 动 ), 366 

radial, see Bessel process( 么 向 贝 骞 尔 过 程 ) 

reflected at the origin( 在 原点 反射 ), 352 

squared variation of( 平 方 变 差 ), 378 

total variation of( 全 变 差 ), 379 


C 


Cauchy criterion for convergence( 柯 西 收敛 
准则 ), 454 
Central limit theorem( 中 心 极限 定理 ), 19 
in a renewal process( 更 新 过 程 )，208 
Chapman-Kolmogorov equation( 切 普 竖 - 科 尔 
黄龙 罗 夫 方程 ), 132, 342, 425 
connected with branching processes( 分 支 过 
程 ), 414 
Characteristic function( 特 征 函 数 ), 10 
Chebyshev's inequality( 切 比 雪夫 不 等 式 )}, 20 
Coe 人 组 cient of excess( 剩 余 系 数 )，42 
Communicating states( 互 通 状 态 ), 60 
Conditional density function( 条 件 密 度 函 数 )，7 
Conditional distribution function( 条 件 分 布 淆 
数 ), 5 
Conditional expectation( 条 件 期 望 )，5-9 
with repect to co-feld( 关 o 域 }), 302 
Continuity of sample paths( 样 本 轨道 的 连续 性 )， 
371 
Convergence of random variables( 随 机 变量 的 收 
钙 性 ), 18 


Convex function( 凸 函数 )，249 
Convolution( 卷 积 )，4，182 
Correlation coefficient( 相 关系 数 ), 14 
Correlation function( 相 关 殉 数 ), 444 
Counter models( 计 数 模 型 ), 128, 171, 177--181， 
202, 204 
Covariance( 协 方差 ), 4 
Covariance function( 协 方差 旺 数 ), 444 
Covariance matrix( 协 方 益 矩阵 )，17 
Covariance stationary process( 协 方差 平稳 过 
程 ), 30, 445 
prediction of( 预 测 )，470--474 
Crossing inequality( 上 穿 不 等 式 )，273 
Cumulative process( 累积 过 程 )，201-203 
Current life( 当 前 寿命 ) 
limiting distribution( 极 限 分 布 ), 193 
in a Poisson process{( 刘 松 过 程 )，174 
in a renewal process( 更 新 过 程 ), 170 


D 


Diagonalizable matrix( 可 对 角 化 矩阵 )，538 

Differential equations of birth and death pro- 
cesses{ 生 灭 过 程 的 微分 方程 ), 135 

Diffussion equation( 扩 散 方 程 ), 341 

Diffussion process( 扩 散 过 程 )，30 

Directly Riemann integrable function( 直 接 黎 受 
可 积 函 数 )，190 

Doob's martingale process(Doob 靳 过 程 )，246， 
295，309-313，332，376 


E 


Eigenvalues and eigenvectors( 特 征 值 和 特征 向 
最 ) 538 

Electron multipliers( 电 子 加 倍 器 )，392 

Elementary renewal theorem{( 初 等 更 新 定理 )， 
188 

Entropy( 燃 )，495-502 

Entry time( 进 入 时 刻 }, 319 

Ergodic states in a Markov chain( 蕊 尔 可 夫 链 的 
议 历 状态 ), 85 

Ergodic stationary processes( 遍 历 平稳 过 程 )， 
487 

Ergodic theorem( 过 历 定理 ), 474 


索 引 499 


mean square convergence( 均 方 收敛 )， 476,， 
480—482 
for sample correlations( 样 本 相关 和 狂 ), 479-480 
strong theorem( 强 记 爵 定理 )，483-486 
Ergodic theory( 遍 历 理 论 ), 474-489 
Excess life( 剩 余 寿命 ) 
limiting distribution of( 极 限 分 布 )，192 
in a Poisson process( 泊 松 过 程 )，173 
in a renewal process{( 更 新 过 程 )， 169 
Exponential distribution( 指 数 分 布 ), 15 
Extinction in branching processes( 分 支 过 程 的 
消失 ) 
in continuous time( 连 续 时 间 ), 416-418 
in discrete time( 离 散 时 间 )，396 


F 


Forward Kolmogorov differential equations( 回 
前 科 尔 英 臣 罗江 微分 方程 ), 136, 416 
Frobenius theory( 弗 罗 贝 尼 乌 斯 理论 ), 542-551 


G 


Gambler’s ruin( 赌 徒 输 光 )，49, 92-94, 108 

Gamma distribution(T 分布 )，15 

Gamma function( 合 玛 函 数 )，36 

Gaussian process( 高 斯 过 程 ), 376, 445 

Gaussian random measure( 高 斯 随机 测度 ), 511， 
5331 

Gaussian systems( 高 斯 系统 ), 510 

Generation function( 母 函数 ), 11-13 
relations for branching processes( 分 支 过 程 的 

母 郴 数 )，394 

Genetic models{ 遗 传 模型 ), 55, 57, 114, 141, 
212, 393 

Geometric Brownian motion, see Brownian 
motion, geometric( 几 何 布 骨 运动 , 见 布衣 运动 
和 几何 ) 

Geometric distribution( 几 何 分 布 ), 16 


H 


Haar functions(Haar 函数 ), 335, 373 


Haploid models( 单 倍 体 模 型 )，55 
Hazard rate(Hazard 比 ), 229 


Heat equation{( 热 方程 )，383 
Helly-Bray lemma(Helly-Bray 引 理 )，19 


Hilbert space( 希 尔 伯 特 空间 ), 469 
I 


Independent increments( 独 立 增 量 )，27,，34 
Index parameter( 指 标 参 数 )，26 
[Indicator function( 示 性 函数 )，255，309 
Inequajities{( 不 等 式 ) 
Chebyshev's inequality( 切 比 雪夫 不 等 式 )，20 
Jensen's inequality (Jensen 不 等 式 ), 116, 249 
Kolmogorov's inequality( 科 尔 莫 芯 罗 夫 不 等 
式 ), 280, 388 
martingale crossings inequajlity( 蒜 上 穿 不 等 
式 ), 273 
maximal inequality for submartingales( 下 蒜 
最 大 值 不 等 式 ), 280, 331 
for partial sums( 部 分 和 不 等 式 ), 275 
Schwarz”inegquality ( 施 巨 效 不 等 式 )}, 20, 451， 
452 
triangle inequality( 三 角 不 等 式 ), 452 
Infinitely often( 无 限 经 常 }), 19 
Infinitesimal generator( 无 穷 小 生成 元 )，132 
Infinitesimal matrix( 无 穷 小 乞 阵 )，151 
Inventory models( 存 储 模 型 ),， 53, 171, 218 
Irreducible Markov chains( 不 可 约 马 尔 可 夫 链 )， 
60 


J 


Jensen's inequality(Jensen 不 等 式 ), 116, 249 
Joint distribution( 联 合 分 布 ), 3 
Joint normal distribution( 联 合 正 态 分 布 ), 14 


K 


Kolmogorov's formula( 科 尔 莫 戈 罗 夫 公 
式 ), 530 


Kolmogorov's inequality( 科 尔 莫 成 罗 夫 不 
等 式 ), 280, 388 


L 


Laplace transform( 拉 普 拉 斯 变换 ),，13, 361, 385 
of a renewal equation( 更 新 方程 )，236 
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Law of jarge numbers( 大 数 定 律 ), 19 
martingale proof of( 革 证明), 316 
Law of the iterated logarithm( 重 对 数 律 )，380 
Law of total probability( 全 概率 公式 ), 6, 8 
Lebesgue-Stieltjes integral(Lebesgue-Stieltjes 
积分 ), 3 
Length-biased sampling( 长 度 偏 倚 抽 样 ), 175， 
195 
Level-crossing problem( 水 平 罕 越 问 题 ), 519 
Levy convergence criterion(Levy 收敛 准则 ), 11 
Likelihood ratios( 似 然 比 ), 245 
as a martingale( 作 为 殷 的 似 然 比 ), 245 
Limit theorems( 极 限定 理 )，18-19 
for branching processes( 分 支 过 程 ), 419 
for Markov chains( 蕊 尔 可 夫 链 ), 83 
Limiting distribution (极限 分 布 ) 
of current life (age) in 3 renewal process{( 和 更 
新 过 程 现 铃 的 极限 分 布 ), 193, 236 
of excess life in a renewal process( 更 新 过 程 
剩余 寿命 的 极限 分 布 )，192 
in a Markov renewal process{( 马 尔 可 夫 更 新 过 
程 ), 207 
Linear fractional transformations( 线 性 分 数 变 
换 )，402 
Linear predictors, theory of( 线 性 预测 )，463 
Linearly independent vectors( 线 性 独立 向 量 )， 
936 
Logistic process(Logistic 过 程 )，144 


M 


Marginal distribution function( 边 缘分 布 孙 数 )， 
3-4 
Markov branching process( 蕊 尔 可 夫 分 支 过 程 )， 
413, 425 
Markov chain( 马 尔 可 夫 链 )，30 
absorption probabilities{ 吸 收 概 率 ), 89 
basic limit theorem( 基 本 极限 定理 ), 83 
classification of states( 状 态 分 类 ), 59 
in continuous time( 连 续 时 间 ), 150 
definition( 定 义 ), 45-80 
martingales related to( 园 ), 241--242, 287， 
328-329, 337 
periodicity( 周 期 性 }, 61 


recurrence of( 常 退 性 )，62-73，94-96 
Markov process, definition of( 马 尔 可 夫 过 程 及 
其 定义 ), 29 
Markov renewal processes{ 马 尔 可 夫 更 新 过 程 )， 
207 
Markov time( 蕊 尔 可 夫 时 间 ), 254-256, 308, 318 
counterexample( 反 例 ), 334 
Martingale convergence theorems( 黄 收 
敛 定理 )，278--287 
for backward martingajles( 反 问 蒜 )，316 
mean Square convergence( 均 方 收敛 )，282， 
333 
Martingales( 持 ), 28, 34, 238_339 
backward martingajes( 反 回转 )，314 
with continuous parameter( 连 续 参 数 著 ),， 318 
related to branching processes{ 关 于 分 支 过程 
的 园 )，400 
related to Brownian motion( 关 于 布 妇 运动 的 
巩 )，357--365，389-390 
related to Markov chains( 关 于 马尔 可 夫 链 的 
狗 ), 287 
related to a Markov process{( 关 于 马尔 可 夫 过 
程 的 对 ), 358 
with respect to o-fields( 与 o 起 相关 的 著 ), 306 
Maximal inequality( 最 大 值 不 等 式 )，280, 331 
Mean square convergence{ 平 均 平 方 收敛 ), 451 
Mean square distance( 平 均 平方 距离 ),， 451-464 
Mean squared error( 平 均 平方 误 着 ), 461 
Measurable random variables( 可 测 随 机 变量 )， 
299 
Minimal process( 极 小 过 程 ), 134 
Mixing stationary processes( 混 合 平稳 过 程 ), 448 
Moving average processes( 清 动 平 均 这 程 )，449， 
455—461, 531 
Multinomial distribution( 多 项 分 布 ), 17, 67 
Multivariate normal distribution( 多 元 正 态 分 
布 ), 14 


N 


Negative binomial distribution{ 负 二 项 分 布 ), 16 

Negative multinomial distribution( 负 多 项 分 布 )， 
39 

Neutron chain reaction( 中 子 链 反 应 ), 392 


Norm( 范 数 ), 469 
Null recurrent state( 零 常 返 状态 )，85 


O 


Option contracts，seeWarrants( 权 证 合约 , 见 担 
保 ) 

Optional sampling thbeorem( 任 瘟 抽 样 定 理 )， 
253, 257 
for dominated martingales( 受 控 扫 的 )，259 

Optional stopping theorem, 261, see also( 任 意 
停止 定理 ) 

Optional sampling theorem for supermartin- 
gales( 关 于 上 堵 的 任意 停 目 定理 ),， 266 

Order statistics( 濑 序 统 计量 ), 126 


Pp 


Parseval relation(Parseval 关系 ), 377 
Periodicity of Markov chainas{( 马 尔 可 夫 链 的 周期 
性 ), 61 
Point of increase( 增 点 )，190 
Point processes( 点 过 程 )]，31--32 
stationary( 平 稳 点 过 程 ), 516 
Poisson distribution( 消 松 分 布 ), 16 
Poisson point process( 沿 松 点 过 程 )，32 
Poisson pbrocess( 泊 松 过 程 )，22-26，28，30-31， 
117—128, 158—160 
characterization of( 当 松 过 程 的 特征 )，219， 
220-228 
distribution of total life( 浪 松 过 程 全 寿命 分 
布 ), 232 z 
martingales related to( 关 于 泊 松 过 程 的 鞠 )， 
321 
as a renewal process{ 作 为 更 新 过 程 的 泊 松 过 
程 ) 170, 173 
waiting times in( 泊 松 过 程 的 等 待 时 间 ), 124 
Positive definite matrices( 正 定 拢 阵 ), 542 
Positive recurrent state( 正 常 返 状态 )，85 
Positive semidefinite functions( 半 正定 函数 )， 
504 
Prediction theorem( 预 测定 理 ), 465 
Probability space( 概 率 空 间 ), 298 
Pure birth processes, 119-120, see also Birth 
and death processes，Yule process( 纯 生 过 程 ， 
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见 生 灭 过 程 和 Yule 过 程 ) 
Pure death process, 158, see also Birth and 
death processes( 纯 灭 过 程 , 见 生 灭 过 程 ) 
in & branching process( 分 支 过 程 的 纯 灭 过 程 )， 
400 


Q 


Queuing models( 排 队 模 型 ), 96-106, 138, 202 
associated renewal processes (排队 联 系 的 更 新 
过 程 ), 171 
M/M/1 system(M/M/1 系统 ), 157, 163 
queuing Markov chain( 排 队 马 尔 可 夫 链 )，52 


R 


Radon-Nikodym derivative{ 拉 东 一 记 古 本 时 
数 ), 246 313 
Random sum({ 随 机 和 ), 12 
Random walk({ 随 机 游 动 ), 48, 67, 106, 112, 263 
range of( 随 机 游 动 的 范围 ), 493 
Realization of a process (过程 的 实现 ), 21 
Recurrent states( 常 返 状态 )，66 
Reflection Principle( 反 射 原理 )，345-351 
Renewal argument( 更 新 幅度 )，183 
Renewal counting process( 更 新 计数 过 程 )，167 
Renewal equation{ 更 新 方程 ), 81--82, 87-89 184 
the Laplace transform of( 更 新 方程 的 拉 普 拉 
斯 变换 ), 236 
related to a branching process( 关 于 分 支 过 程 
的 更 新 方程 ), 217 
Renewal function( 更 新 油 数 ), 168, 173, 181 
asymptotic expansion of( 更 新 函数 的 渐 近 姑 
开 ), 195 
Renewal process( 更 新 过 程 )，30-31，167-231 
age process as a Markov process( 作 为 马尔 可 
夫 过 程 的 年 龄 过 程 )，232 
associated point process{ 与 更 新 过 程 相 伴 的 点 
过 程 ), 516 
delayed( 延 迟 更 新 过 程 )，197 
stationary( 平 稳 更 新 过 程 )，199 
superposition of( 更 新 过 程 瑟 加 )， 221 
terminating( 可 终止 的 更 新 过 程 ), 204 
Renewal theorem( 更 新 定理 ), 189, 197 
basic renewal theorem{ 基 本 更 新 定理 ), 191 
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elementary renewal theorem( 初 等 更 新 
定理 ), 188 
Renewal theory( 更 新 理论 ), 81-82 
Replacement models( 和 置换 模型 }, 175-177, 202， 
203 
age replacement( 年 龄 置换 )，176-229 
block replacement( 殷 置换 )，111，177，204， 
231 
planned replacement( 计 划 置 换 ), 76 
Reservoir models( 水 库 模型 ), 270 
Right regular sequences( 右 正则 序列 ), 241 
Risk models( 风 险 模 型 },， 204, 209, 336 


S 


Sample function( 样 本 陌 数 ), 21 

Scalar products{ 内 积 },， 537 

Schauder functions(Schauder 下 数 ), 373 

Schwarz'” inequality( 施 瓦 兹 不 等 式 )，20, 451 

Semi-Markov brocess( 半 马尔 可 夫 过 程 )，207 

Sequential decision models( 序 贯 决 策 模型 ),， 251 

Shift invariant event( 移 位 不 变 事件 ),， 487 

Shift operator( 移 位 算 子 ), 458, 486 

0-fields, of events(o 域 及 事件 ), 298 

Span of a distribution( 分 布 的 跨度 ), 190 

Spectral analysis( 谱 分 析 ), 502 

Spectral density function( 谱 密度 画 教 )，508 

Spectral distribution function( 谱 分 布 函 数 )，503 

Spectral representation( 谱 表示 )，539 

Spectral theorem( 谱 定理 ), 536 

Standard Brownian motion( 标 准 布朗 运动 )，343 

State space( 状 态 空间 ), 26 

Stationary increments( 平 稳 增 量 )，27 

Stationary probability distribution( 平 稳 概率 分 
布 ), 85 

Stationary processes( 平 稳 过 程 ), 443-435 

complex valued{ 复 值 平稳 过 程 )，508 

Stationary transition probabilities( 平 稳 转 移 概 
率 }, 30, 45 

Stirling's formula( 斯 特 林 公式 ), 36 

Stock market models( 股 票 市 场 模型 )，42, 267， 
363 

Stopping time, see Markov time( 停 时 ， 见 马尔 
可 夫 时 间 ) 


Submartingales, 248-250, see also Martin- 
gales( 下 园 , 见 园 ) 

Subordination( 从 属 运算 )，367 

Success runs( 成 功 游程 ), 54, 70, 335, 337 

Sums of independent random variables( 独 立 随 
机 变量 之 和 ), 240 


as a martingale( 作 为 转 的 独立 随机 变量 之 和 )， 
240 


associated renewal processes( 与 独立 随机 变量 
之 和 相伴 的 更 新 过 程 ), 171 
Supermartingales, 248-250, see also Mart- 


ingales( 上 园 , 见 园 ) 
T 


Total life( 全 寿命 ) 
in a Poisson process{( 泊 松 过 程 中 的 全 寿命 )， 
174, 232 
in a renewal process( 更 新 过 程 中 的 全 寿命 )， 
170 
Traffic flow models (交通 流 模型 ), 171 
Transient state( 瞬 态 ), 64, 94 
Transition probability (转移 概率 ), 29 
Transition probability matrix (转移 概率 人知 阵 )， 
46, 58 
Triangle inequality (三角 不 等 式 ), 452 


U 


Uniform distribution( 均 名 分 布 ), 15, 126 
Uniformly integrable random variables( 一 致 可 
积 随机 变量 ), 258, 279 
Upcrossings inequality( 上 穿 不 等 式 ), 273 
Urn models( 铅 模型 ), 244, 290 
Ehrenfest model(Ehrenfest 模型 ), 51, 161 
Polya model(Polya 模型 ), 115 
related martingales( 关 于 铅 模 型 的 靳 ),，329 


V 


Vector space( 癌 量 空 间 ), 469 
W 


Waiting times( 等 待 时 间 ), 167 
of a birth and death process( 生 灭 过 程 的 )， 


133 

in a Poisson process( 泊 松 过 程 的 ),，124 
Wald’'s approximation(Wald 近似 式 ), 265 
Wald’s identity, 187, 264, 327, see also 

Wald’s martingale(Wald 恒等式 , 见 Wald 园 ) 
Wald’s martingale (Wald 蒜 )，243 
Warrants{ 担 保 ), 267, 363 
Weakly stationary process( 允 平稳 过 程 )，445 


索 引 503 


Wide-sense stationary process( 宽 平稳 过 程 ), 445 
Wiener process(Wiener 过 程 ), 22 


Y 
Yule process(Yule 过 程 ), 119, 122, 158, 160， 


165, 438, 439 
Yule-Walker equations(Yule-Walker 方程 )，528 
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